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OR ”绪论 概率 论 的 性 质 


0.1 F Be 


概率 论 是 一 门 数学 学 科 ， 它 与 几何 学 或 分 析 力 学 等 学 科 有 很 相似 的 目标 . 对 每 
一 门 学 科 我 们 都 必须 仔细 地 去 区 分 理论 的 三 个 方面 : (a) 形 式 逻 辑 的 内 容 ; (b) 直 观 
的 痛 售 ;《c) 应 用 .不 按 这 三 方面 之 间 的 图 有 关系 去 考虑 这 三 方面 ， 就 不 能 正确 估计 
其 全 部 结构 的 特性 和 优点 . 


1. 形式 逻辑 的 内 容 


公理 化 的 数学 只 论 及 某 些 无 定义 的 事物 之 间 的 关系， 这 一 点 可 以 用 下 国际 象棋 
来 作 很 好 的 说 明 . 要 想 描述 国际 象棋 ， 除 了 陈述 一 组 下 棋 规 则 外 ， 不 可 能 给 象棋 下 
一 个 “定义 ”尽管 对 棋子 的 通常 的 形式 可 以 作 某 种 程度 的 描写 ,但 仅 赁 对 棋子 本 号 
的 形状 的 描述 不 一 定 能 清楚 地 说 明 哪 个 模子 是 王 . 棋盘 和 棋子 是 有 用 的 ,但 没有 它 
们 仍然 可 以 下 棋 . 重要 的 事情 在 于 了 解 棋子 的 走 法 与 作用 ， 也 就 是 要 了 解 一 组 棋 规 ， 
要 问 国际 象棋 中 的 一 个 “ 革 ” 或 “ 王 ” 的 “和 定义 ”或 “精确 的 本 性 ”是 什么 ， 这 征 
没有 意义 的 ， 与 此 类 似 ， 在 几何 学 中 我 们 也 不 去 过 问 点 和 直线 到 底 是 什么 ， 点 和 和 直 
线 是 无 定义 的 概念 ， 而 几何 公理 规定 它们 之 间 的 一 些 关 系 ， 例 如 ， 两 点 确定 一 条 下 
线 等 等 。 这 些 就 是 规则 ， 没 人 提出 异议 .我 们 可 以 改变 公理 系统 而 去 人 研究 不 同形 式 
的 几何 ， 而 且 各 种 非 欧 几何 的 逻辑 结构 不 依赖 它们 与 现实 的 关系 ， 物 理学 家 曾 研 究 ， 
在 不 同 于 牛顿 的 万 有 引力 定律 时 物体 如 何 运动 . 即使 牛顿 的 万 有 引力 定律 是 正确 的 ， 
这 种 研究 也 是 有 意义 的 . 


2. 直观 的 背景 


与 国际 象棋 不 同 ， 几 何 学 和 力学 的 公理 反映 了 客观 存在 着 的 直观 背景 ， 事实 上 ， 
几何 的 直观 性 是 如 此 之 强 ， 以 致 它 常 常会 跑 在 逻辑 推理 的 前 面 ， 人 逻辑 、 下 观 与 实际 
经 验 三 者 之 间 的 相互 依赖 性 达到 怎样 的 高 度 ， 这 个 问题 我 们 不 需要 去 讨论 ， 当 然 ， 
人 们 的 直观 能 力 是 可 以 锻炼 和 发 展 的 例如， 下 棋 时 ， 初 学 者 总 是 小 心 购 区 ， 走 棋 
时 还 要 想 一 想 的 下 棋 规 则 ; 但 是 有 经 验 的 棋 手 在 一 管 之 间 就 能 向 握 复 森 的 悄 沈 ， 对 
他 的 直观 往往 不 能 用 理由 来 解释 . 同样 ， 数 学 直观 随 着 经 验 增加 而 增加 ， 人 们 有 可 
能 对 于 一 些 概 念 例 如 4 HES Ta] A PO RR. 

甚至 人 类 的 集体 直观 能 力也 在 进步 着 .牛顿 的 力 场 概 念 、 超 距 作 用 的 概念 、 去 


2 BOR 绪论 概率 论 的 性 质 


soe (Maxwell) 关于 电磁 波 的 概念 ， 起 初 都 被 认为 是 “不 能 想像 的 ”和 “违反 直 
观 的 " 现代 技术 和 媒体 、 通 迅 的 普及 ， 使 得 这 些 概念 成 为 一 些 通 第 的 语汇 .同样 ， 
现在 的 学 生 不 会 体会 到 ， 当 概率 论 还 在 晴 牙 的 时 候 ， 它 与 某 些 思维 方式 、 偏 见 及 其 
他 困难 的 斗争 情形 . 现在， 报纸 报导 着 民意 测验 的 样本 ,统计 的 影响 已 经 渗透 到 生 
活 的 各 个 方面 ， 年 青 的 女孩 们 也 会 从 统计 数字 中 查看 自己 结婚 的 可 能 性 ， 于 是 对 于 
像 这 样 的 陈述 :“ 这 个 事件 的 机 会 是 5 分 之 3”"， 人 人 都 有 了 直观 的 感觉 ， 这 虽然 是 很 
模糊 的 ， 但 此 直观 感觉 足够 作为 概率 论 入 门 的 指南 和 背景 ， 随 着 理论 的 发 展 ， 以 及 
接触 到 一 些 更 为 微妙 的 应 用 ， 这 个 直观 能 力 还 要 得 到 发 展 . 


3. 应 用 


应 用 几何 学 和 力学 的 概念 时 ， 要 把 它们 与 某 些 物 理 对 象 等 同 起 来 ， 但 是 这 个 结 
合 过 程 非 常 灵活 ， 且 变化 无 常 ， 不 能 给 出 普遍 的 法 则 来 . 刚体 这 个 概念 是 基本 但 有 
用 的 概念 ， 虽 然 没 有 一 个 物理 对 象 真正 具 备 它 的 条 件 . 哪些 物体 能 当 作 刚体 来 处 理 ， 
要 视 所 处 环境 和 所 需要 的 近似 度 来 决定 ， 橡胶 当然 不 是 刚体 ， 但 是 在 讨论 汽车 在 冰 
上 运动 的 时 候 ， 许 多 教科 书 是 把 橡胶 轮胎 当 作 刚体 来 处 理 的 ， 按 照 理 论 的 目的 ， 我 
们 不 管 物质 的 原子 结构 ， 而 有 时 把 太阳 当 作 一 个 连续 物质 的 大 球 来 处 理 ， 有 时 又 把 
它 当 作 一 个 质点 来 处 理 . 

在 应 用 中 ， 抽 象 的 数学 模型 只 是 当 作 工具 来 使 用 ， 而 对 同一 实际 场合 可 以 来 用 
不 同 的 模型 来 描述 ， 数 学 理论 的 应 用 方式 不 依赖 于 事先 形成 的 意见 ， 它 是 一 个 有 目 
的 的 技术 ， 依 赖 于 经 验 ， 而 且 随 着 经 验 改变 .这些 技术 的 哲学 分 析 是 值得 研究 的 ， 
但 它 不 属于 数学 、 物 理学 或 统计 学 范围 以 内 . 因此 ， 必 须 把 关于 概率 基础 的 哲学 从 
数学 和 统计 学 中 分 离 出 去 ， 犹 如 关于 直观 空间 概念 的 讨论 ， 现 在 已 经 从 几何 学 中 分 
离 出 去 一 样 . 


0.2 FIRM AER 


MAICAI I (REE POR) 呈现 出 理论 和 应 用 的 相互 促进 的 现象 : 理论 
的 进展 开辟 了 应 用 的 新 领域 ， 反 过 来 每 一 个 新 的 应 用 又 产生 出 新 的 理论 问题 和 有 成 
果 的 研究 ， 目 前 概率 论 已 应 用 到 很 多 不 同 的 领域 ， 而 我 们 所 要 求 的 是 一 个 普 吉 性 理 
论 所 具有 的 那 种 灵活 性 ， 以 便 对 广泛 的 种 种 需求 提供 恰当 的 工具 ， 因 此 我 们 必须 反 
对 下 述 企图 (与 趋向 ): 把 其 理论 、 术 语 及 其 思想 库 建立 得 过 分 接近 于 某 一 特殊 兴趣 
范围 ， 我 们 所 要 做 的 绝 非 如 此 ， 而 是 按照 在 几何 学 和 力学 中 已 经 证 明 为 十 分 成 功 的 
方式 来 发 展 出 一 种 数学 理论 . 

PAVE APRS SRR, ERR. SARA A 
明显 的 直观 意义 ， 我 们 把 这 个 直观 性 翻译 成 一 个 抽象 的 模型 ， 然 后 把 这 模型 加 以 推广 ， 
使 它 能 够 适用 于 更 复杂 的 场合 ， 书 中 的 实例 是 用 来 阐明 几 种 模型 的 经 验 背 景 和 局 发 读 
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者 的 耳 观 能 力 的 ， 但 理论 本 号 还 是 数学 性 质 的 我们 不 拟 力 求解 释 概 率 的 “真正 意 
义 ”， 正 如 近代 物理 学 家 不 致力 于 前 明 质 量 和 能 的 “实在 意义 几何 学 家 不 致力 于 解 
释 点 的 性 质 那 样 ， 我们 将 要 做 的 ， 就 是 证 明 一 些 定 理 ， 并 指出 这 些 定理 怎样 应 用 . 

最 初 ， 概 率 论 的 目的 是 描述 有 关机 会 游戏 的 经 验 这 一 狭 军 的 领域 , 这 时 ， 主 要 
目标 只 是 要 把 某 些 概率 计算 出 来 ， 在 开始 的 几 章 里 ， 我 们 也 计算 一 些 典 型 的 概率 ， 
但 是 要 记 住 数值 的 概率 不 是 理论 的 主要 对 象 . 其 目的 在 于 发 现 一 般 的 规律 并 构 返 出 
满意 的 理论 模型 . 

概率 对 我 们 所 起 的 作用 正如 质量 在 力学 中 所 起 的 作用 在 力学 上 ， 即 使 不 知道 
个 别 行 星 的 质量 ， 不 去 思考 实际 上 测量 这 些 质量 的 方法 ， 也 照样 可 以 讨论 行星 体系 
的 运动 ， 甚 至 虚构 的 行星 体系 也 可 以 作为 一 个 有 益 的 、 有 启发 的 研究 对 象 . 类 似 地 ， 
一 些 实际 的 且 有 用 的 概率 模型 涉及 一 些 不 能 观察 到 的 世事 ， 例 如 几 十 亿 元 已 用 于 投 
资 自动 电话 交换 ， 这 些 都 是 因为 从 简单 的 概率 论 模 型 来 考虑 时 ， 对 其 中 各 种 可 能 的 
系统 都 需 作 比 较 . 理论 上 的 最 优 系统 被 建立 起 来 了 ， 而 其 余 的 系统 也 就 不 存在 了 . 
在 保险 业 中 ， 概 率 论 用 来 计算 毁灭 概率 ， 就 是 用 这 理论 来 避免 某 些 不 期 望 发 生 的 情 
形 ， 因 此 ， 它 应 用 到 一 些 实际 上 观察 不 到 的 情形 .即使 连 一 个 数值 都 不 能 得 到 时 ， 
概率 论 仍 然 是 有 效 的 和 有 用 的 . 


0. 3 “OR TT” ABE S 


近代 概率 的 数学 理论 的 成 就 是 有 代价 的 ， 那 就 是 把 理论 局 限 在 “机 会 ”的 茶 一 
个 特殊 方面 .概率 的 直观 概念 联系 到 归纳 推理 ， 以 及 像 下 面 的 一 些 判 断 :“ 保 尔 大 概 
是 一 个 幸运 的 人 ”,“ 这 本 书 大 概 是 一 部 失败 之 作 ”，“ 费 马 〈Fermat) 的 猜测 大 概 是 
不 正确 的 ” 这 类 判断 是 哲学 家 和 逮 辑 学 家 感 兴趣 的 ， 也 是 数学 理论 ”研究 的 对 象 . 
然而 必须 这 样 了 解 ， 我 们 所 关心 的 不 是 归纳 推理 的 形态 ， 而 是 一 种 可 以 叫 作 是 物理 
概率 或 者 统计 概率 的 事物 ， 粗 略 地 来 解释 一 下 这 句 话 的 意思 ， 可 以 这 样 说 : 我 们 所 
说 的 概率 不 是 关于 这 些 判 断 ， 而 是 关于 一 个 理想 实验 的 可 能 结果 ， 在 我 们 谈 到 概率 
之 前 ， 大 家 必须 先 承 认 一 个 特殊 理想 实验 的 想像 模型 ， 壁 如 说 扔 硬币 ， 其 至 抽样 观 
察 月 球 上 的 袋鼠 观察 扩散 物 中 一 个 质点 ， 记 录 打 来 电话 的 次 数 .一 开始 就 需 承 认 什 
么 是 这 个 理想 实验 所 有 的 可 能 结果 〈 即 “样本 空间 ”) 以 及 它们 的 概率 ， 这 种 构想 可 
以 在 力学 里 找到 类 似 情 况 : 在 力学 里 引进 了 包含 着 2 个 、3 个 或 17 个 质点 的 腾 想 模 
型 ， 其 中 质点 并 没有 任何 特性 ， 同样， 如 果 我 们 来 分 析 扔 硬币 的 实验 ， 我 们 理论 的 
wR ARR “TEM. EH, RE, EM, er ”这 些 记号 的 序列 ， 而 不 关心 实际 实 
验 的 偶然 情况 ， 在 这 个 体系 里 ， 像 什么 “明天 太阳 将 升 起 的 概率 是 多 少 ” 是 不 在 考 
察 之 列 的 ， 假 使 我 们 要 讨论 这 个 概率 ， 我 们 势必 先 来 确定 一 个 实验 的 〈 理 想 ) 模型 ， 
而 这 个 实验 不 免 要 说 成 “从 无 穷 多 个 存在 中 随机 地 选取 一 个 ……”， PERE TR 
型 其 实 也 不 需要 多 大 的 想像 力 ， 但 是 这 样 做 是 无 聊 而 且 毫 无 意义 的 . 


4 第 0 章 绪论 概率 论 的 性 质 


天 文学 家 谈论 测量 太阳 中 心 的 温度 和 到 天 狼 星 上 的 旅行 ， 这 些 似乎 是 不 能 办 到 
的 ， 但 是 作 这 种 思考 并 不 是 没有 意义 的 ， 同 理 ， 我 们 也 不 去 关心 理想 的 实验 能 否 实 
现 ， 我 们 将 要 从 事 于 分 析 抽 象 的 模型 ， 在 我 们 的 思想 深 处 ， 保 持 着 概率 的 一 个 直观 
解释 ， 这 种 解释 在 某 些 应 用 中 获得 实施 的 意义 ， 我 们 想像 把 实验 重复 做 很 多 次 ， 概 
率 为 0.6 的 事件 终究 可 以 期 望 在 100 次 里 出 现 60 次 ， 这 句 话 是 有 意 地 含糊 其 辞 的 ， 
但 是 ， 对 于 较为 初等 的 应 用 来 说 ， 它 提供 了 一 个 足够 形象 的 直观 背景 ， 随 着 理论 更 
精深 地 发 展 ， 实 用 意义 和 直观 图 像 就 变 得 更 具体 了 . 


0.4 fia Ea 


我 们 将 要 考虑 一 些 理论 模型 .在 这 些 模型 中 ， 概 率 像 力学 中 的 质量 一 样 ， 是 作 
为 一 些 自由 参数 而 出 现 的 ， 可 以 用 各 种 各 样 不 同 的 方法 来 应 用 它们 ， 应 用 的 技巧 和 
直观 能 力 随 着 理论 的 发 展 而 发 展 . 

这 是 其 他 数学 学 科 中 所 采用 的 富有 成 效 的 标准 手法 ， 没有 其 他 的 手法 可 以 满足 
正在 发 展 着 的 概率 论 及 其 应 用 的 各 个 分 支 的 各 种 各 样 的 需要 . 

令 我 们 昼 异 的 是 ， 直 观 的 概率 不 能 充分 满足 科学 的 需要 ， 但 是 它 的 存在 确 是 一 
个 历史 事实 ， 在 第 1.6 PA b 中 ， 我 们 将 要 讨论 多 个 质点 在 多 个 盒 里 随机 分 布 的 
问题 ， 适 当 的 或 者 “自然 ”的 概率 分 布 对 每 个 人 来 说 似乎 是 完全 清楚 的 ， 并 且 可 以 
被 物理 学 家 毫 不 犹豫 地 接受 然而， 事情 是 这 样 ， 物 理 质点 的 概念 在 人 们 意识 中 是 
没有 经 过 训练 的 ， 而 “自然 ”( 或 玻 耳 兹 曼 (Boltzmann)〉 分布 有 时 必须 代 以 爱 因 斯 
坦 - 波 司 (Einstein-Bose) 分 布 有 时 又 必须 代 以 费 米 - 犹 拉克 《Fermi-Dirac) 分 布 . 
直观 论证 不 能 说 明 为 什么 光子 不 同 于 质子 ， 为 什么 它们 不 遵从 一 个 “预先 给 定 ” 的 
规律 ， 如 果 现 在 能 找到 一 种 论证 ， 那 也 只 能 说 明 直 观 概念 和 理论 一 起 发 展 里 了 .无 
论 如 何 ， 即 使 对 应 用 来 说 ， 自 由 和 灵活 都 是 重要 的 ， 而 且 把 理论 局 限 在 一 个 固定 的 
范畴 里 是 不 利 的 . 

有 人 书 哮 现 代 概率 论 是 如 此 抽象 和 如 此 普遍 化 ， 以 至 难于 应 用 . 这 类 似 于 实用 
的 人 们 当初 曾经 反对 麦克 斯 书场 论 的 挑战 口吻 ， 这 个 论点 可 以 被 下 列 事实 所 驳 倒 ; 
抽象 的 随机 过 程 理论 提供 了 一 些 新 的 未 曾 想 像 过 的 应 用 ， 现 代 的 起 伏 理论 所 提供 的 
新 的 知识 又 一 次 地 与 直观 想法 相 违 背 ， 并 且 使 人 们 去 修正 对 实际 的 态度 ， 然 而 ， 这 
种 辩论 是 没有 什么 用 处 的 ， 在 昨天 还 认为 是 不 合 实际 的 东西 今天 就 是 实际 的 东西 了 ， 
而 明天 将 要 成 为 理论 的 又 被 今天 的 实用 的 人 们 认为 是 毫 无 价值 的 游戏 . 


0.5 历史 小 记 


对 概率 的 统计 或 经 验 观点 主要 是 由 交 。 米 泽 斯 (R. von Mises) 和 费 希 尔 《R. A. 
Fisher) 发 展 的 ， 样本 空间 中 的 概念 是 由 汉 ， 米 泽 斯 引进 的 ， 这 个 概念 使 得 有 可 能 把 概 


0.5 历史 小 记 5 


率 的 严格 的 数学 理论 建立 在 测度 论 上 . 在 20 世纪 二 十 年 代 中 ,在 许多 作者 的 影响 下 ， 
概率 论 的 测度 论 方法 逐渐 形成 .现代 概率 的 公理 化 处 理 ， 是 由 科 尔 砚 戈 罗 夫 〈A.Kol- 
mogorov) 给 出 的 .我 们 将 沿 着 这 一 线索 进行 讨论 ， 但 是 ， 由 于 这 一 卷 只 讨论 离散 概 
率 的 简单 情形 ， 公 理化 系统 这 个 名 词 就 显得 太 严 并 了 . 


第 1 草 样本 空间 


1.1 AK FS 


概率 论 的 数学 理论 ， 与 许多 实际 的 和 理想 的 实验 相 联系 ， 或 结合 一 些 生活 现象 ， 
便 获 得 了 实用 的 价值 和 直观 的 意义 ， 这 里 所 谓 实 际 的 和 理想 的 实验 ， 例 如 有 : 扔 1 次 
METH; 扔 100 次 人 硬币 ; M3 MRS; 理 一 副 纸 牌 ; 用 两 副 纸 牌 对 点 ; 玩 轮 盘 赌 ; 观 
察 放 咽 性 原子 的 寿命 或 观察 人 的 寿命 ， 以 人 为 随机 样本 而 观察 其 中 左 撤 子 的 人 数 ， 
将 两 种 作物 杂交 而 观察 它们 后 代 的 遗传 型 ， 所 谓 生 活 现 象 ， 例 如 有 : 初生 儿 的 性 别 ; 
电话 交换 中 被 占用 的 通话 线路 的 数目 ; 电话 的 来 电 次 数 ; 在 电讯 系统 里 面 的 随机 品 
声 ; 生产 过 程 的 例 行 质 量 控 制 ; 意外 事故 的 频率 ; 天 空 某 一 区 域内 双星 的 个 数 ; 在 
扩散 过 程 中 一 个 质点 的 位 置 ， 上 列 各 项 找 述 是 含糊 了 一 点 ， 要 使 概率 论 有 意义 ， 我 
们 还 必须 一 同 明确 所 探讨 的 实验 或 观察 的 可 能 结果 究竟 是 指 什么 . 

硬币 掉 下 时 不 一 定 是 正面 朝 上 或 反面 朝 上 ， 它 可 能 是 滚 掉 了 ， 也 可 能 是 笔直 地 
站 着 .但 是 我 们 只 承认 正面 和 反面 是 扔 硬币 以 后 仅 有 的 可 能 结 朱 ， 这样 一 来 ， 理 论 
要 简洁 得 多 了 ， 同 时 也 不 影响 其 应 用 .这 种 类 型 的 理想 化 是 实践 中 标准 的 处 理 办 法 ， 
测定 原子 的 寿命 或 人 的 寿命 而 没有 误差 是 不 可 能 的 ,但 是 为 了 理论 上 的 目的 ， 我们 
不 妨 设想 寿命 是 实 实在 在 的 一 个 数 . 这 样 问题 就 产生 了 : 什么 样 的 数值 能 确实 地 代 
表 一 个 人 的 寿命 ”有 没有 生命 不 可 逾越 的 最 大 年 龄 ”是 否 一 切 年 龄 都 是 可 以 设想 的 
We? 一 方面 ， 谁 也 不 认为 人 能 活 到 一 千岁 ; 另 一 方面 ， 现 行 的 保险 业务 对 于 人 的 可 
能 寿命 却 不 加 任何 上 限 . 按照 寿险 死亡 率 表 所 基于 的 公式 算出 来 ， 干 年 不 死 的 人 在 
全 人 类 中 大 约 只 占 10” 分 之 一 ，10” 这 个 数 共 含有 10” 亿 个 零 ， 这 个 结论 从 生物 学 
或 社会 学 的 角度 看 来 ， 固 然 是 毫 无 意义 的 ， 但 是 单纯 从 统计 上 着 眼 ， 它 和 经 验 当然 
没有 什么 矛盾 .因为 一 个 世纪 内 出 生 的 人 数 还 不 到 10*. 要 想 用 统计 方法 来 检验 上 述 
说 法 ， 就 需要 10" 个 世纪 以 上 的 时 间 ， 而 这 个 时 间 段 比 地 球 的 寿命 的 10"” 倍 还 要 大 
得 多 ， 毫 无 疑问 ， 这 样 小 的 概率 和 我 们 心 昌 中 的 “不 可 能 性 ”是 没有 什么 予 厦 的 ，. 
你 也 许 认 为 ， 这 种 小 概率 的 使 用 本 身 就 是 荒废 绝伦 的 ， 其 实 不 然 ， 使 用 这 种 小 概率 
非但 没有 坏处 ， 而 且 还 可 以 简化 公式 ， 再说， 如 果 我 们 真 地 把 活 一 千年 的 可 能 性 排 
除 掉 ， 我 们 势必 承认 一 个 最 大 年 龄 限 z 的 存在 ， 说 人 能 活 xz 年 而 不 能 活 FSB. 
这 种 说 法 决 不 会 比 无 限 寿命 的 说 法 更 能 讲 得 通 些 . 


1. 参见 第 4. 1 节 例 〈b)， 一 一 编者 注 
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任何 理论 都 必然 含有 理想 化 ， 对 于 我 们 来 说 ， 第 一 个 理想 化 是 关于 “实验 ”或 
“观察 ”的 可 能 结果 . 如 果 我 们 要 为 实验 制作 一 个 抽象 模型 ， 我 们 必须 一 开始 就 作出 
决定 : 这 理想 的 ) 实验 的 可 能 结果 是 由 哪些 东西 构成 的 . 

为 了 统一 术语 起 见 ， 我 们 把 实验 或 观察 的 结果 叫做 事件 .这样 一 来 ， 我 们 就 可 
以 谈论 “ 扔 5 个 硬币 至 少 出 现 3 个 正面 ”的 事件 .同样 ， 打 桥牌 的 “实验 ”， 其 结果 
可 以 是 “ 北 家 拿 到 2 张 爱 司 (ace)” 的 事件 .一 个 样本 的 组 成 元 素 〈 例 如 “85 人 组 
成 的 样本 中 有 2 个 左 撤 子 ”) 和 一 个 测量 的 结果 (例如 “温度 120”，“7 部 电话 占 
线 ”) 也 都 叫 作 事件 . 

我 们 要 区 分 复合 (或 可 分 解 的 ) 事件 和 简单 (或 不 可 分 解 的 ) 事件 . 例如， 要 
是 拨 2 个 骨 子 使 “总 和 为 6”， 那 就 是 使 骨 子 点 数 成 为 “(1,5) 或 (2,4) 或 (3,3) 
或 (4,2) 或 (5,1)”， 即 这 个 事例 把 “总 和 为 6” 的 事件 分 解 成 5 个 简单 事件 ， 同 
样 ，“ 两 个 奇数 点 ”事件 就 分 解 为 “(1,1) 或 (1,3) 或 …… 或 (5,5)”9 个 简单 事 
件 ， 注 意 : 如 果 掷 出 的 结果 是 (3,3)， 那 么 ， 这 个 相同 的 结果 既 包 含 在 事件 “总 和 
为 6” 又 包含 在 事件 “两 个 奇数 点 ”之 内 .这 两 个 事件 不 是 互 斥 的 ， 它 们 可 以 同时 发 
生 ， 作 为 第 二 个 例子 ， 我 们 来 考虑 人 的 寿命 ， 每 一 个 特殊 数值 x 代表 一 个 简单 事件 ， 
“此 人 50 Be” RR x E50 到 60 之 间 这 一 事件 ， 用 这 种 办 法 ， 每 一 个 复合 事件 都 可 
以 分 解 为 一 些 简 单 事 件 ， 也 就 是 说 ， 每 一 个 复合 事件 是 一 些 简 单 事件 的 集合 

如 果 要 在 理论 上 很 明确 地 讨论 “实验 ”或 者 “观察 ”"， 必 须 首 先 约定 : 简单 事件 
代表 可 以 想像 的 结果 ， 我们 用 它们 来 定义 理想 的 实验 ， 换 句 话 说 ， 这 种 简单 (不 可 
分 解 ) 事件 是 不 定义 的 ， 犹 如 几何 中 的 点 和 线 是 不 定义 的 一 样 . 习惯 上 ， 这 些 简单 
事件 叫 作 样 本 点 ， 或 干脆 就 叫 点 ， 由 定义 得 知 : (理想 ) 实验 的 每 一 个 不 可 分 解 的 结 
果 可 用 一 个 且 只 能 用 一 个 样本 点 来 表示 . 所 有 这 些 样本 点 的 全 体 称 之 为 样本 空间 ， 
于 是 ， 牵 涉 到 给 定 的 理想 ) 实验 的 一 切 事 件 ， 都 可 以 用 样本 点 来 表达 . 

在 把 这 些 基 本 的 约定 形式 化 以 前 ,我 们 讨论 几 个 以 后 常 要 用 到 的 例子 . 


1.2 il 于 


(a) 三 个 球 在 三 个 盒 中 的 分 布 . 表 1- 1 列 出 了 3 个 球 放 人 3 个 盒 中 的 “实验 ”的 
EPPA BEHR. 

其 中 每 一 个 排列 都 代表 一 个 简单 事件 ， 即 一 个 样本 点 .事件 A“ 某 个 盒 内 放 了 
几 个 球 ” 为 第 1 到 第 21 个 排列 的 总 体 ， 我 们 说 事件 A 是 由 第 1 到 第 21 个 样本 点 所 


L 打 桥 牌 和 玩 扑 克 的 定义 ; 一 副 桥牌 共 52 张 ， 分 4 种 花色 ， 每 种 花色 有 13 张 . 同 -种 花色 有 13 个 
不 同 的 面值 ，2,3,，…,10,“ 贾 克 ”(jack),“ 坤 ” (queen), “F” (king), “2A” Cace). 4 种 花 
色 称 为 黑 桃 、 梅 花 、 红 心 、 方 块 ， 前 两 种 是 黑色 的 而 后 两 种 是 红色 的 ， 同 面值 的 牌 称 为 同 点 ， 所 谓 
打 桥 牌 ， 就 是 把 整 副 牌 分 发 给 4 家 ， 这 4 家 称 为 “ 东 ”、“ 南 ”"、“ 西 ”>、“ 北 ”， 每 家 各 得 13 ok. BT 
玩 扑克 的 定义 是 ， 从 一 副 牌 里 每 家 各 取 5 张 ， 进 行 组 合 ， 
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构成 的 集合 ， 类 似 地 ， 事 件 B“ 第 一 个 盒 是 不 空 的 ”是 第 1、 第 4 到 第 15、 第 22 到 
第 27 这 几 个 样本 点 构成 的 集合 .事件 C“A 和 如 者 发生” 是 由 第 1、 第 4 到 第 15 
共 13 个 样本 点 构成 的 集合 ， 在 这 个 特例 中 ，27 个 样本 点 中 的 每 一 个 或 者 属于 A 或 
者 属于 B (或 者 同属 于 二 者 )， 因此， 事件 “或 者 A 或 者 昌 或 者 二 者 都 发 咎 ”就 是 
整个 样本 空间 ， 因 此 它 必然 发 生 ， 事件 D“A 不 发 生 ” 是 由 第 22 到 第 27 个 这 6 个 
样本 点 所 构成 ， 它 可 以 用 下 述 条 件 来 描述 : 没有 一 个 盒 是 空 的 ， 事件 “第 一 个 盒 

空 的 而 其 他 的 盒 没 有 放 多 个 球 ” 是 不 可 能 发 生 的 ， 因 为 没有 一 个 样本 点 能 满足 这 样 
的 条 件 . 


RIL 3 个 球 放 入 3 个 盒 中 全 部 可 能 结果 


l. {abc| - | -} 10. {a | bcj -} 19. { - |a | be} 
2. { - |abc| -} ll. {b lac] -} 20. {- | b jac} 
3. {- | - | abc} 12. { clab | -} 21.{- | clab} 
4. fab | cl -3} 13. {fa | - | be} 22. fa | b | ¢ 
5.f{ac| b] —} 14. 6 | - lac} 23. {a | cj b} 
6. {bcla | -} 15. { c| - jab} 24. {b fla | o 
7. {ab | - | c} 16. {~ lab | cœ} 25. {b | cla } 
8.{ac| -| b} .{- lac] b} 26. { cla | b} 
9.{ bc| ~ la } .{- | bela } 27. § ct b la } 


(b) 个 球 在 郊 个 金 中 的 随机 分 布 ， 对 于 > 个 球 分 布 在 = 个 盒 中 的 一 般 情 形 完全 
可 以 用 类 似 的 办 法 来 进行 研究 ， 只 不 过 这 时 的 排列 个 数 随 r 和 的 增加 而 大 幅度 增 
fil. 4n=3, 7 二 4 时， 样本 空间 由 81 个 样本 点 构成 ， 当 一 "一 10 时， 样本 空间 共 
有 1028 个 样本 点 ， 造 一 个 完整 的 表 就 要 有 约 十 万 卷 的 篇 申 
我 们 用 上 面 这 个 例子 来 说 明 一 个 重要 的 事实 : 即 样本 点 的 性 质 和 我 们 的 理论 是 
无 关 的 ， 对 于 我 们 来 说 ， 样 本 空间 〈 及 定义 在 样本 空间 上 的 概率 分 布 ) 决定 了 理想 
的 实验 .我 们 应 用 球 和 盒 这 种 形象 的 语言 ， 但 是 同一 个 样本 空间 可 以 允许 有 很 多 种 
不 同 的 实际 解释 .为 了 说 清 这 一 点 并 为 了 今后 的 应 用 ， 我 们 在 这 里 抄录 一 些 其 直观 
背景 很 不 相同 的 实验 ， 然 而 抽象 地 看 ， 它 们 都 等 价 于 了 个 球 分 布 于 二 个 盒 中 的 模型 ， 
在 这 些 情形 中 ， 其 合理 的 赋 概 是 不 完全 一 样 的 ， 后 面 我 们 将 要 重新 讨论 . 
(bol) 生日 .7 个 人 的 生日 的 可 能 情形 相当 于 7 个 球 放 入 365 个 盒 中 的 不 同 排列 
(假定 一 年 有 365 K). 
(b,2) 事故 .如 果 把 ~ 个 意外 事件 按 其 发 生 在 星期 几 来 分 类 的 话 ， 则 它 等 于 -个 
球 放 入 ?一 7 PE 
(b,3) aan Ade. 子弹 相当 于 球 ， 靶 相当 于 人 镶 . 
(b,4) 抽 祥 .把 个 人 按 其 年 龄 和 职业 来 分 类 ， 于 是 类 就 相当 于 盒 而 人 就 相当 
FER. 
(b.5) 生物 学 中 的 照射 ， 当 光线 射 到 视网膜 中 的 细胞 时 ， 光 质点 相当 于 球 ， 而 
实际 的 细胞 就 是 我 们 模型 中 的 盒 ， 类 似 地 ， 在 研究 照射 的 遗传 效果 时 ， 梁 色 体 相当 
盒 ， 而 a 质点 相当 于 球 . 
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(b,6) 宇宙 射线 的 实验 ， 击 中 盖 革 (Geiger) 计数 器 的 质点 相当 于 球 ， 而 计数 器 
HWFA. 

(b,7) - E, FRA r THRE, CE n 层 楼 中 每 一 层 都 停 ， 乘客 走出 电梯 的 
各 种 不 同方 式 的 排列 与 > 个 球 放 入 ?2 个 盒 中 的 各 种 不 同 排列 相同 . 

(b,8) RF. Bir aR A) Reza RAS THE -~ 个 球 放 人 ?=6 FE. MRE 
扔 硬币 ， 则 对 应 的 盒 只 有 n=2 个 . 

(b,9) 随机 数 ，r 个 数字 所 构成 的 序列 的 各 种 可 能 的 次 序 ， 相 当 于 ~ 个 球 〈 对 应 
于 位 置 ) BA 10 个 称 为 0,1,…,9 的 盒 中 的 可 能 分 布 . 

(b,10) 六 个 人 的 性 别 分 布 ， 这 时 我 们 有 ?一 2 个 盒 以 及 了 个 球 . 

(b,11) 优惠 券 的 收集 ， 优 惠 券 的 不 同 种 类 相当 于 盒 ， 收 集 的 优惠 券 代 表 球 . 

(b,12) 桥牌 中 的 爱 司 ， 4 个 玩 牌 者 代表 4 个 盒 ， 我 们 有 r 一 4 个 球 . 

(b,13) 基因 的 分 布 ， 每 一 个 生物 (人 人， 植物 或 动物 ) 的 后 代 都 从 其 祖先 那里 继承 
一 些 遗 传 基因 如果 一 种 特殊 的 遗传 基因 可 以 有 ?种 不 同 的 形式 A ，…A,， 则 后 代 可 
以 按 其 基因 的 类 型 来 分 类 ， 后 代 相 当 于 球 ， 遗 传 基因 的 类 型 A, ,…,A, 相当 于 盒 . 

(b,14) 化 学 .假定 长 链 从 合 物 与 氧 发 生 反 应 ， 每 一 个 链 都 可 能 和 0,1,2,… 个 氧 
分 子 起 反应 ， 这 里 参加 反应 的 氧 分 子 相 当 于 球 ， 而 聚合 物 的 链 相 当 于 盒 . 

(b,15) 显影 液 的 理论 .在 一 个 照相 底板 上 涂 上 一 层 显影 液 ， 当 这 种 液体 的 粒子 
被 7 个 光子 击 中 时 ， 它 就 起 反应 .为 了 区 分 黑白 对 比 度 ， RNY AMA ep AT 
(想像 为 盒 ) 被 r 个 光子 所 击 中 . 由 此 ， 我 们 得 到 一 个 占 位 问题 ， 粒 子 相当 于 盒 ， 而 
光子 相当 于 球 . 〈 当 然 ， 实 际 问 题 是 很 复杂 的 ， 因 为 底板 上 的 液体 的 粒子 的 感光 性 强 
弱 是 不 一 样 的 . ) 

(b,16) 印刷 错误 . r 个 错误 在 一 本 具有 页 的 书 中 的 一 切 可 能 的 分 布 相当 于 r 
个 球 放 和 人 nn 个 盒 中 的 一 切 可 能 分 布 ， 不 过 7 必须 小 于 每 一 由 的 字数 . 

O 球 为 不 可 辨 的 情形 ， 让 我 们 回 到 例 (a)， 并 且 假 定 那 3 个 球 是 不 可 辨别 的 . 
这 意味 着 像 4,5,6 这 样 的 3 种 不 同 的 排列 都 分 不 清 了 ， 因 此 表 1- 1 变 为 表 1- 2. KR 
1- 2 确定 了 下 述 理想 实验 的 样本 空间 : 把 3 个 不 可 辨别 的 球 放 入 3 个 金 中 。 而 且 同 样 
我 们 可 以 采用 rr 个 球 放 入 个 盒 中 的 办 法 . | 

表 1-2 3 个 不 可 辨别 球 放 入 3 个 盒 中 的 全 部 可 能 结果 


l. {*** |} - | - } 6. { * |* |- } 
2.{ - |***| - j 7. {* | — |**)} 
3. {— | — | wun} 8. { - | ee | x} 
4. {xx | « | ~ 3 9 {- | x | wx } 
5. {ee |- | *} 10. {s | * | *}. 


实际 生活 中 球 是 否 可 办 别 与 我 们 的 理论 不 相干 ， 其 至 当 它 们 可 以 辨别 时 ， 我们 
也 可 以 作 不 可 辨别 的 来 处 理 ， 桥 牌 中 的 爱 司 [ 例 (b,12)] 或 者 电梯 中 的 人 LB C, 
D] 都 是 可 以 辨别 的 ， 但 是 把 它们 当 作 不 可 辨别 的 来 处 理会 更 方便 例 (b,8) 中 的 
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别 的 或 不 可 辨别 的 球 的 模型 可 以 根据 特定 的 目的 和 便利 性 来 决定 ， 问 题 的 性 质 将 决 
定 我 们 如 何 选择 ， 不 过 ， 在 任何 情形 下 ， 只 有 当 适 当 的 模型 选 定 以 后 ， 即 当 样 本 空 
间 定 义 以 后 ， 理 论 才 能 开始 登场 . 

在 上 面 的 模型 中 ， 我 们 考虑 的 球 不 可 辨别 ， 不 过 表 1- 2 仍然 是 指 第 1、 第 2 及 第 
3 个 盒 ， 而 且 它 们 的 次 序 还 是 至 关 重 要 的 .我们 可 以 进一步 假定 盒 也 是 不 可 辨别 的 
(例如 ， 盒 可 以 随机 地 选取 而 不 考虑 其 外 在 表现 )， 当 球 和 盒 都 是 不 可 辨别 的 时 候 ， 
所 有 可 能 的 排列 只 有 3 种 , 即 (x xx | 一 | 一 },， {xx l | 一 },， (x | x*| xx). 

(d) 抽样 ， 假 定 为 了 估计 吸烟 的 人 数 ， 我 们 任意 选取 100 个 人 作为 样本 .在 这 
里 ,我 们 只 对 其 中 吸烟 的 人 数 工 感 兴趣 ,而 可 以 是 0 到 100 之 间 的 任意 一 个 整数 
这 样 一 来 ， 我 们 可 以 确定 这 个 样本 空间 是 由 z 一 0,1,2,……100 等 101 个 “点 ”所 组 成 
的 ， 每 个 个 别 的 样本 或 观察 的 结果 完全 可 以 用 对 应 的 点 x 来 代表 .现在 举 一 个 复合 
事件 的 例子 :“ 样 本 中 的 人 超过 半数 吸烟 ” 这 个 事件 意味 着 ， 实 验 的 结 朱 为， 在 r= 
51,52,…,100 等 50 个 事件 中 有 一 个 发 生 ; 究竟 发 生 的 是 哪 一 个 呢 ? 这 里 并 没有 区 
待 ， 同 样 ， 样 本 的 每 个 性 质 都 可 以 通过 列举 它 所 对 应 的 情况 或 样本 点 来 表示 ， 为 了 
术语 上 的 统一 ， 我 们 称 其 为 事件 而 不 说 成 样本 的 性 质 ， 用 数学 的 术语 来 说 ;一 个 事 
件 就 是 与 之 对 应 的 所 有 的 样本 点 的 集合 . 

Ce) 抽样 〈 续 )， 现 在 我 们 对 这 100 个 人 ，、 不 但 要 按 吸 烟 与 否 来 分 类 ， 而 且 还 要 
区 分 他 们 的 性 别 ， 于 是 ， 现 在 的 样本 点 需 由 男女 吸烟 者 、 男 女 非 吸烟 者 的 人 数 来 表 
示 ， 也 就 是 由 整数 的 四 元 组 〈(M ,下 M, Fa) 来 描述 .我 们 可 以 把 这 样 的 四 元 组 的 
全 体 作 为 样本 空间 ， 其 中 的 每 个 整数 都 在 0 与 100 之 间 ， 且 每 组 四 个 数 的 和 为 100. 
一 共有 176 851 个 这 样 的 四 元 组 共同 组 成 样本 空间 (参见 2. 5 节 ). 所 谓 在 一 个 样本 
中 ，“ 相 对 而 言 男性 吸烟 者 多 于 女性 ”， 意 思 就 是 说 在 这 个 样本 中 ， 比 值守 大 于 
Fr 璧 如 像 “ 点 ” (73,2,8,17) 就 具有 这 个 性 质 ， 而 “点 ”0,1,50,49) MAR. 
在 原则 上 ， 任 何事 件 都 可 以 把 具有 所 需 特 性 的 全 部 四 元 组 列举 出 来 作为 的 述 . 

Cf) 扔 硬币 ， 如 果 把 一 个 硬币 扔 3 次 ， 这 时 ， 样 本 空间 就 由 8 个 点 构成 ， 如 采风 
H 表示 正面 ， 开 表示 反面 ， 那 么 这 8 个 点 就 可 以 用 HHH, HHT, HTH, THH, HTT, 
THT,TTH,TTT 来 代表 . “其 中 至 少 有 2 次 出 现 正 面 ”的 事件 A 可 以 由 这 8 个 点 中 
前 4 个 所 构成 的 集合 来 表示 . “恰巧 有 1 次 出 现 背 面 ”的 事件 总 是 指 HHT & HTH 
或 THH， 所 以 我 们 就 说 吾 包含 着 这 3 NA. 

(g) 夫妇 的 年 龄 ， 保 险 公司 对 于 夫妇 年 龄 的 分 布 比 较 感 兴趣 ， 让 我 们 以 x 代表 
TEHER, y 代表 妻子 的 年 龄 .于 是 每 作 一 次 考察 就 可 以 得 到 一 个 数 对 ay). X 
应 于 考察 的 整个 样本 空间 ， 就 可 以 用 zy 平面 的 第 一 象限 来 表示 ， 于 是 每 一 个 x 之 0， 
>0 的 点 都 是 这 个 样本 空间 中 的 一 个 样本 点 . “丈夫 的 年 龄 大 于 40 岁 ” 的 事件 A 可 
以 用 直线 zx 一 40 右边 的 全 部 点 来 代表 ;“ 趟 夫 的 年 龄 比 妻 子 大 ”的 事件 B 可 以 用 zx 办 
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与 第 一 象限 的 等 分 线 y 二 x 之 间 所 夹 的 角 状 区 域 来 代表 ， 也 就 是 说 可 以 用 >y 的 点 
的 全 体 来 代表 ;“ 妻 子 的 年 龄 大 于 40 岁 ” 的 事件 C 可 以 用 第 一 象限 中 位 于 直线 y 一 40 
以 上 的 部 分 来 代表 .， 至 于 2 对 夫妇 年 龄 的 联合 分 布 的 几何 表示 ， 就 需要 用 到 四 维 空 
间 了 了 . 

Ch) 相 空 间 ， 在 统计 力学 里 ， 体 系 的 每 个 可 能 “状态 ”被 称 为 “ 相 空 间 中 的 一 个 
Rm”. MMAR EMA], FSCS SERA. ER ASTER. 


1.3 样本 空间 。 事件 


如 前 所 述 ， 可 以 清楚 地 看 出 ， 我 们 不 讨论 概率 则 已 ， 如 果 要 提 到 概率 ， 我 们 总 
是 把 它 结合 着 所 给 定 的 样本 空间 (或 者 用 物理 上 的 话 来 说 是 结合 着 某 个 理想 的 实验 ) 
来 谈 ， 我 们 由 样本 空间 和 它 的 点 的 概念 出 发 ,今后 我 们 认为 ， 它 们 是 已 经 给 定 的 了 . 
它们 是 概率 论 中 的 原始 的 无 定义 的 概念 ， 正 如 “点 ”和 “直线 ”是 欧 氏 几何 的 公理 
化 处 理 中 的 无 定义 的 概念 一 样 . 样本 点 本 身 的 内 在 性 质 与 我 们 的 理论 毫 无 关系 ， 样 
本 空间 在 如 下 意义 下 提供 了 一 个 理想 实验 的 模型 ， 按 定义 来 说 就 是 ， 实验 中 每 个 可 
能 设想 的 结果 ， 都 完全 可 以 由 惟一 的 样本 点 来 描绘 只 有 从 实验 的 每 个 结果 都 能 清 
楚 地 判定 某 一 事件 A 是 发 生还 是 不 发 生 时 ,谈论 这 个 事件 A 来 才 有 意义 .代表 “A 
发 生 了 ”这 个 事件 结果 的 所 有 那些 样本 点 的 集合 ， 就 完全 地 描绘 着 “A 发 生 了 ”的 
这 个 事件 . 反 过 来 ， 包 含 着 一 个 或 多 个 样本 点 的 任意 给 定 的 集合 A 都 可 以 当 作 一 个 
事件 来 加 以 讨论 。 这 个 事件 是 否 发 生 就 由 实验 的 结果 是 否 由 A 中 的 点 所 表示 而 定 ， 
所 以 事件 这 个 词 的 定义 ， 就 完全 等 同 于 样本 点 的 一 个 集合 。 我 们 说 一 个 事件 A aS 
着 某 些 点 (或 由 某 些 点 构成 )， 就 是 说 这 些 点 表示 在 理想 实验 中 能 使 A 发 生 的 那些 
结果 . 

例 在 1.2 节 例 (a) 中 的 样本 空间 中 ， 考 虑 由 点 1,7,13 所 构成 的 事件 U、 这 
是 一 种 形式 的 、 直 接 的 定义 ;但 是 , U 可 以 用 很 多 等 价 的 方法 来 描述 ， 例 如 ,，U 可 
以 定义 为 下 面 3 个 条 件 都 满足 的 事件 : (1) 第 二 个 盒 是 空 的 ; 2) 球 a 在 第 一 个 盒 
Hh; (3) 球 b 不 在 c 后 出 现 ， 这 三 个 条 件 的 每 一 个 都 确定 一 个 事件 .由 条 件 (1) 
所 定义 的 事件 U, 由 点 1,3,7 一 9,13 一 15 所 构成 ， 由 条 件 2) 所 定义 的 事件 U, 由 
点 1,4,5,7,8,10,13,22,23 所 构成 ; 而 由 条 件 G) 所 定义 的 事件 Us HA 1 一 4,6， 
7,9 一 11,13,14,16,18 一 20,22,24,25 所 构成 事件 口 也 可 以 考虑 作 三 个 事件 Ui， 
U, ,Us 同时 发 生 . > 

术语 “事件 ”和 “样本 点 ”有 着 直观 的 意义 ， 而 这 些 概 念 等 价 于 在 各 数学 分 文 
中 常见 的 点 集 和 点 的 概念 . 

在 上 述 例子 和 1. 2 节 例 (a) 中 ， 我 们 看 到 了 ， 由 两 个 或 者 两 个 以 上 的 事件 可 以 
定义 一 个 新 的 事件 ， 由 于 这 些 例子 的 启发 ， 我 们 引进 形式 化 的 事件 的 代数 的 概念 
《 即 是 点 集 的 代数 的 概念 ). 


12 Fle 样本 空间 


14 事件 之 回 的 关系 


现在 ， 我 们 假定 一 个 任意 然而 又 是 固定 的 样本 空间 所 已 经 给 定 . 我 们 用 大 写字 
母 表示 事件 ， 即 样本 点 的 集合 ， 点 工 包 含 在 事件 A 中 用 xEA 表示， 因此 每 一 个 点 
MArES. KAA BH AAAN AYR, wife AB. 

一 般 情 况 下 ， 事 件 由 一 定 情 况 下 的 点 来 定义 ， 因 此 有 必要 引入 一 个 记号 来 表示 
某 些 特定 情况 下 不 存在 样本 点 的 事件 .以 下 定义 将 解决 这 个 问题 . 

定义 1 我 们 用 符号 A 二 0 来 表示 事件 A 不 包含 任何 样本 点 〈 即 是 不 可 能 事件 )， 
0 必须 理解 为 一 个 符号 而 不 是 数 . 

相对 于 任何 一 个 事件 A， 都 有 以 “4 不 发 生 ” 为 条 件 来 定义 的 另 一 事件 ， 它 包含 
着 所 有 不 属于 A 的 点 . 

定义 2 样本 空间 中 一 切 不 属于 事件 A 的 点 所 构成 的 事件 称 为 A 的 补 (或 称 有 A 
的 非 ) BA, HA’ Zz. AR, S'=0. 


Ca) (b) 
图 1-1 说 明 事件 之 间 的 关系 ，(a》 中 以 粗 线 包围 的 区 域 是 并 集 'AUBUC， 中 间 黑 色 的 三 
角形 区 域 是 交集 ABC， 有 浅 色 阴影 具有 月 亮 形 的 区 域 是 B 与 AUC 的 补 集 之 交 


对 于 任意 两 个 事件 A 及 B， 总 可 以 伴随 着 两 个 新 的 事件 ， 它 们 是 以 条 件 “A 和 8B 
同时 发 生 ” 和 “A 或 B 发生 ， 或 两 者 同时 发 生 ” 来 定义 的 .这 两 个 事件 分 别 以 AB 和 
AUB 记 之 .事件 4AB 包含 4A 和 B 中 所 有 公共 的 样本 点 ， 如 果 A 和 B 互相 排斥 ， 则 
就 没有 公共 点 ， 因 而 事件 AB 成 为 不 可 能 事件 .这 时 ,我们 就 用 方程 

AB=0 (4.1) 
表示 ， 并 读 作 “A 和 B ARMA”. SAB 表示 A MB NAA, RA, W 
是 “A EAT BRACE”. 同样 ，A'B 表示 A 和 B 都 不 发 生 . 事件 AUB 表示 A 和 
B 中 至 少 有 一 个 发 生 ， 它 包含 既 不 属于 A 又 不 属 B 的 点 以 外 的 全 部 样本 后 . 

在 概率 论 里 ,事件 AB 是 用 A MB 同时 发 生 的 话 来 描述 的 ， 如 果 要 用 标准 的 数 
学 术语 来 说 ， 那 么 AB 就 称 为 A 和 B 的 (逻辑 上 的 交集， 同样 ，AUB 就 称 为 A 与 


1. 并 集 ， 也 可 以 称 为 和 集 . 一 一 详 者 注 
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B 之 并 . 这 些 概 念 可 以 推广 到 多 个 事件 A,B,C,D,… 的 情 帝 . 

定义 3 对 每 一 组 事件 A,B,C,…， 可 以 把 二 个 新 事件 定义 如 下 : 第 一 个 事件 是 
由 属于 全 部 给 定 的 集合 中 的 样本 点 的 全 体 所 组 成 的 ， 我 们 用 ABC RARE, FH 
称 它 为 A,B,C，… 之 交 ( 同 时 实现 )， 第 二 个 事件 是 由 至 少 属于 给 定 的 各 集合 中 之 一 
的 样本 点 的 全 体 所 组 成 ， 我 们 用 AUBUCU… 来 表示 ， 并 称 之 为 给 定 的 各 集合 之 并 
(至 少 有 一 个 实现 )， 在 事件 组 A,B,C… 中 ， 如 果 任 何 两 个 都 没有 公共 点 ， 即 AB 二 0， 
AC= 二 0,… ,BC 一 0,…， 则 称 这 组 事件 是 两 瑶 互 斥 的 ， 

我 们 还 需要 用 一 个 记号 来 表达 这 样 的 命题 : “ 当 B 不 发 生 时 ,A 不 可 能 发 生 ”; 
或 者 说 “A 的 发 生 蕴涵 着 B 的 发 生 ”， 这 意思 是 说 : A 的 每 个 点 都 包含 在 B 之 中 .不 
妨 作 一 个 直观 的 想像 ， 璧 如 所 有 的 母亲 所 成 的 集合 是 全 体 妇 女 的 一 部 分 : 所 有 的 母 
亲 都 是 妇女 ， 但 并 不 是 所 有 的 妇女 都 是 母亲 . 

定义 4 记号 ACB 及 BDA 是 等 价 的 ， 这 表示 A 的 每 一 个 点 都 包含 在 日 之 中 ， 
RAID RMA “ARAB” A “BRARD”. 如果 上 述 冀 涵 关 系 成 立 ， 我 们 就 用 
B 一 A 来 代替 BA ， 它 表示 事件 “B 发 生 而 A FARE”, 

事件 B 一 A 包含 着 所 有 在 B 中 而 不 在 A 中 的 那些 点 .根据 这 个 记号 ， 我 们 可 以 
Bip A 一 久 一 A 和 A 一 A=0. 

H (a) 若 A 和 B 互 不 相 容 ， 则 A 的 发 生 蕴 涵 着 B 不 发 生 ， 反 之 亦 然 ， 因 此 ， 
AB=0 th Rt ACB’ MBCA’. 

(b) 事 件 A 一 AB 表示 A 发 生 而 并 不 是 A 和 B 同时 发 生 ， 因 此 A 一 AB=AB. 

(c) 在 1.2 节 例 (g) 中 ,事件 AB 意味 着 丈夫 的 年 龄 大 于 40 岁 而 且 还 比 他 的 妻 
TEBAK; AB 意味 着 丈夫 的 年 龄 大 于 40 岁 但 不 比 他 妻子 大 ，AB 可 以 用 由 x 轴 ， 
ZX 二 40 和 y 二 x 所 构成 的 无 穷 的 梯形 区 域 来 表示 ; 事件 AB 可 以 用 x 二 40 和 yy 二 x 所 构 
成 的 三 角形 区 域 来 表示 ， 后 者 y 二 x 包含 在 区 域内 ; 事件 AC 表示 丈夫 和 妻子 的 年 龄 
都 大 于 40 岁 ， 事 件 AUC 表示 夫妻 之 中 至 少 有 一 个 大 于 40 岁 ，AUB 表示 或 者 丈夫 
大 于 40 岁 ， 如 若 不 然 ， 至 少 比 妻子 大 〈 用 一 般 的 语言 来 说 ， 丈 夫 的 年 龄 超过 min 
(40, FRE). 

(DEL 2H (a) 中 , OE 表示 第 i 个 盒 是 空 的 事件 (i 二 1,2,3)， 类 似 地 ， 
A S, D.T, 分 别 表示 第 i 个 盒 放 1 个 、 2 个 或 3 个 球 ， 于 是 EEE; 二 了 ,SiS;C-5:， 
D,D; 二 0， 注 意 区 CE,， 等 等 ， 事件 D UD: UD, 是 由 条 件 “ 至 少 有 一 个 盒 放 2 个 
球 ” 所 确定 的 . 

(e) 桥 牌 (参看 1.1 节 脚 注 )， 令 A,B,C,D 分 别 表 示 北 家 、 南 家 、 东 家 、 西 家 各 
自 都 至 少 有 一 张 爱 司 的 事件 ， 显 然 ， 至 少 有 一 个 玩 牌 者 拿 到 一 个 爱 司 ， 所 以 这 4 个 


1. 两 个 或 两 个 以 上 的 事件 的 交 的 标准 符号 是 A 站 mB 或 者 A 站 BNnC 等 等 为 了 某 些 特殊 的 目的 ， 这 种 
符号 和 更 好 一 些 ， 央 此 ， 在 第 二 卷 里 我 们 就 采用 这 种 符号 ， 不 过 ， 为 了 排 印 的 简便 起 见 ， 现 在 我 们 仍 
用 ABR ABC 等 符号 . 
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事件 至 少 有 一 个 事件 一 定 发 生 ， 因 此 AUBUCUD= 是 全 样本 空间 ， 事 件 ABCD 当 
日 仅 当 每 一 个 玩 牌 者 都 拿 到 一 张 爱 司 时 才 发 生 . 事件 “ 西 家 有 4 个 爱 司 ”的 发 生意 
味 着 事件 A, B,C 都 不 发 生 ; 即 是 A' ,B,C 都 发 生 ， 或 者 ABC RE. 
(HE 1.2 节 实 例 〈g) 中 ， 我们 有 BCCA; 即 是 说 , “如 果 丈 夫 的 年 龄 大 于 妻子 
(B) 而 且 妻 子 的 年 龄 大 于 40 岁 (C)， 则 丈夫 的 年 龄 大 于 40 岁 A)”. 事件 A 一 BC 如 
何 用 语言 来 描述 ? > 


1.5 离散 样本 空间 


最 简单 的 样本 空间 ， 莫 过 于 那些 只 含有 限 多 个 (譬如 说 nn 个 ) 点 的 空间 ， 如果 
很 小 〈 例 如 在 扔 几 个 硬币 的 场合 ) ， 则 样本 空间 就 很 容易 具体 化 . 但 在 玩 桥 牌 的 游戏 
中 ， 要 具体 化 牌 的 分 配 情况 所 构成 的 样本 空间 就 比较 复杂 些 . 然而 无 论 如 何 ， 我 们 
还 是 可 以 这 样 来 设想 ; 把 每 个 样本 点 描写 在 一 个 筹码 上 ， 于 是 这 些 筹码 的 全 体 ， 就 
代表 了 这 个 样本 空间 .事件 A (例如 “ 北 家 有 2 张 爱 司 ”〉 就 可 以 用 筹码 中 某 一 部 分 
来 代表 ,而 A 可 以 用 剩 下 来 的 那些 筹码 来 代表 .只 有 从 这 儿 再 前 进一步 ， 我 们 才能 
设想 到 具有 无 穷 多 个 筹码 的 情况 ， 或 者 具有 无 穷 个 点 E ,Ez ,Es，… 的 样本 空间 . 

例 〈a) 让 我 们 来 扔 一 个 硬币 ， 一 直 扔 到 它 出 现 正面 为 止 ， 于是， 这 个 样本 空间 
的 点 就 是 (以 开 表 正面 ，T 表 反面 ， 以 下 常用 这 两 个 记号 ， 不 再 注 出 ): E=H,E, 
=TH,E,=TTH,E,=TITH, S$. ZFH 永 不 发 生 的 可 能 性 可 以 有 两 种 不 同 的 
考虑 方式 ， 或 者 认为 它 是 可 以 设想 的 ， 或 者 认为 那 是 不 可 设想 的 . 如 采 我 们 认为 那 
是 可 以 设想 的 ， 那 么 ， 这 个 可 能 性 就 用 点 E 来 代表 . 

(b) 假 定 有 三 个 人 asb, 在 做 游戏 ， 比 如 说 下 棋 ， 其 规则 如 下 : 开 怒 时 a 和 bb 对 
下 ， 而 ec 在 局 外 ， 谁 葵 了 谁 就 被 代替 ， 因 而 在 第 二 次 游戏 中 赢家 和 上 c 对 下 ， 而 输家 
在 局 外 ， 用 这 种 方式 一 直到 有 一 个 人 接连 赢 两 次 而 成 为 赢家 时 为 止 ， 为 了 简单 起 见 ， 
每 一 次 游戏 中 不 分 胜 负 的 可 能 性 不 加 考虑 ， 我 们 的 游戏 的 可 能 结果 可 以 由 下 面 的 方 
案 来 表示 : 
Cx) aa,acc,acbb, acbaa, acbacc, acbacbb, acbacbaa, +=- 

bb, bec, bcaa, bcabb, bcabec, bcabcaa, bcabcabb,….. 

此 外 ， 可 以 假想 没有 一 个 人 接连 赢 两 次 ， 这 意味 着 游戏 按 下 述 方 式 之 一 无 穷 地 进行 
FR: 
(x x) acbacbacbach:*+, bcabcabcabca::>. 
我 们 这 个 理想 的 “试验 ”的 样本 空间 由 (x ) 和 (x* x* ) 所 确定 ， 而 且 是 无 穷 的 . 显然 ， 
其 样本 点 可 以 排 成 一 个 简单 的 序列 ， 在 C(x * ) 中 的 两 个 点 排 在 最 前 面 ， 接 者 把 (* ) 
中 的 点 按 aa,bbyaccybcc,… 的 次 序 继 续 排 列 下 去 . (这 个 例子 将 要 在 习题 5 AG, E 
5.2 节 例 (a); 第 15 章 习题 5 中 继续 讨论 . ) > 

定义 ”如 果 一 个 样本 空间 只 包含 有 限 多 个 点 ， 或 者 别 有 无 穷 多 个 点 ， 而 这 些 点 
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可 以 排 成 一 个 简单 的 序列 ELE, ,… 的 话 ， 我 们 就 说 这 个 样本 空间 是 离散 的 . 

并 不 是 每 一 个 样本 空间 都 是 离散 的 ， 根据 熟知 的 定理 人 康 托 (G. Cantor) 定 
理 ]， 由 一 切 正 数 所 组 成 的 样本 空间 就 不 是 离散 的 . 这 里 ， 让 我 们 把 力学 上 大 家 所 熟 
悉 的 特性 对 比 着 来 叙述 : 在 力学 上 ， 首 先 考 虑 的 往往 是 离散 的 质点 ， 而 每 个 个 体 点 
的 质量 都 是 有 限 的 ， 这 个 概念 与 质量 连续 分 布 的 概念 有 显著 区 别 ， 因 为 后 者 是 说 : 
每 个 个 体 点 都 是 没有 质量 的 .在 第 一 种 情况 下 ， 很 容易 的 就 可 以 得 到 体系 的 总 质量 ， 
只 要 把 个 体 的 质量 加 起 来 即 可 ; 而 在 第 二 种 情况 下 ， 总 质量 需要 按 质 量 的 分 布 密度 
进行 积分 来 计算 .类似 地 ， 在 离散 的 样本 空间 中 ， 也 只 要 用 加 法 就 可 以 算出 事件 的 
概率 ， 而 在 其 他 样本 空间 中 ， 就 要 用 到 积分 . 对 于 这 两 种 情况 ， 除 了 运算 时 需要 用 
到 不 同 工 具 之 外 ， 本 质 上 并 没有 什么 区 别 . 为 了 从 反映 现实 的 概率 来 考虑 ， 而 不 为 
技巧 上 的 困难 所 限制 ， 我 们 只 讨论 离散 的 样本 空间 .以 后 会 看 到 ， 即 使 只 讨论 这 种 
特殊 的 情况 ， 也 会 得 出 很 多 有 趣味 而 又 重要 的 结果 . 

在 这 本 书 里 ， 我 们 只 考虑 离散 的 样本 空间 . 


1.6 离散 样本 空间 中 的 概率 预 答 知 识 


各 种 事件 的 概率 都 是 -一些 数 值 ， 这 些 数值 的 性 质 犹如 几何 学 中 的 距离 、 力 学 中 
的 质量 ， 概 率 论 假定 概率 的 数值 是 给 定 的 ， 但 是 关于 它们 的 实在 数值 等 于 什么 ， 怎 
样 测量 出 来 ， 却 用 不 着 作 任何 的 假定 ， 一 些 重要 的 应 用 具有 定性 的 性 质 ， 与 具体 数 
值 无 关 ， 只 有 很 少 的 情况 才 用 到 概率 的 数值 ， 当 真正 需要 知道 概率 的 数值 时 ， 那 么 
所 用 的 方法 和 测量 距离 的 方法 一 样 是 变化 多 端的 《在 测量 距离 时 ， 木 怕 师 傅 、 测 量 
员 、 飞 行 员 和 天 文 工 作者 所 用 的 方法 很 少 有 相似 之 处 )， 例 如 ， 本 书 中 我 们 要 考虑 扩 
散 常数 ， 它 是 概率 论 中 的 一 个 概念 .要 想得到 扩散 常数 ， 那 就 需要 考虑 与 之 联系 的 
物理 方法 或 其 他 理论 方法 ， 直 接 的 测定 是 不 可 能 的 ， 相 反 ， 为 制作 死亡 率 表 而 需要 
的 概率 数值 ， 却 是 得 自 比 较 原 始 的 观测 资料 ， 在 很 多 应 用 方面 ， 为 了 确定 概率 ， 或 
者 把 理论 与 观测 作 比 较 ， 往 往 要 用 到 一 些 巧妙 的 统计 方法 ， 而 这 些 方法 却 又 建立 在 
概率 论 的 精深 理论 上 ， 换 句 话 说 ， 概 率 的 直观 意义 是 清楚 了 ， 但 是 只 有 当 理 论 向 前 
推进 了 ， 才 能 够 看 到 它 是 怎样 被 应 用 ， 光 靠 着 给 概率 下 这 个 或 那个 “定义 ”， 对 于 实 
践 来 说 是 远 远 不 够 的 . 

扔 一 个 “均匀 的 ”硬币 时 ， 我 们 毫 不 犹 称 地 认为 正面 和 反面 的 概率 都 是 1/2， 这 
也 就 是 说 ， 如 果 扔 硬币 次， 全 部 2" 个 可 能 结果 都 有 相同 的 概率 .从 理论 的 观点 来 
看 ， 这 无 非 是 一 个 约定 ， 许 多 人 认为 这 个 约定 是 不 可 避免 的 ， 而 且 是 惟一 的 可 能 
另 一 方面 ， 曾 经 有 一 批 哲学 家 和 统计 学 家 不 满足 于 这 个 约定 ， 主 张 从 相 矛 盾 的 假设 
出 发 (自然 界 的 齐 一 性 或 不 齐 一 性 ).. 也 有 人 主张 ，1/2 这 个 概率 是 从 经 验 得 来 的 . 
然而 ， 每 当 使 用 精深 的 统计 方法 来 检验 实际 扔 硬币 的 结果 的 时 候 ， 结 论 总 归 是 : E 
面 和 反面 的 出 现 不 是 等 概率 的 ， 尽 管 “绝对 均匀 的 ”硬币 并 不 存在 ， 我 们 还 是 坚持 
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有 一 个 “理想 ”的 硬币 ， 这 不 单单 是 为 了 它 的 逻辑 简单 性 ， 主 要 是 因为 它 是 有 用 的 
而 且 是 能 用 的 ， 一 则 ， 在 许多 应 用 方面 ， 这 个 模型 已 经 把 现实 描写 得 足够 准确 的 了 ; 
更 重要 的 却 是 这 样 一 个 经 验 事 实 ， 即 是 : 每 当 结论 与 我 们 的 模型 偏离 时 ， 总 伴随 着 ， 
例如 ， 硬 币 重心 的 位 置 不 正 的 现象 ， 这 样 一 来 ， 就 算 理想 模型 永远 不 会 绝对 准确 地 
实现 ， 它 倒 反 而 是 非常 有 用 的 了 ， 因 为 对 它 的 偏离 可 以 提醒 我 们 去 发 据 潜 伏 着 的 不 
正常 现象 ， 举 例 来 说 ， 在 现代 统计 的 质量 控制 法 [创始 人 是 休 哈 特 〈Shewhart)] 中 ， 
我 们 就 使 用 理想 化 的 概率 模型 ， 以 便 在 对 于 模型 有 显著 偏离 的 时 候 ， 就 去 查 究 “可 
推 湖 的 原因 ”， 从 而 及 早 地 排除 早期 的 机 器 故障 和 生产 过 程 中 的 不 正常 现象 . 

类 似 的 讨论 可 以 应 用 到 其 他 的 场合 ， 例 如 ， 打 桥牌 时 一 手 牌 的 可 能 的 种 数 大 约 
在 102 左 右 ， 通 常 ， 我 们 约定 把 它们 作为 等 概率 的 ， 要 想 对 这 个 约定 作 一 次 验证 , 那 
么 必须 进行 10” 次 以 上 的 试验 一 一 相当 于 一 个 人 日 夜 不 停 地 每 秒 钟 玩 一 局 ， 大 约 要 玩 
一 百 亿 亿 年 (10*) 的 局 数 . 虽然 如 此 ， 这 个 假定 的 结果 还 是 可 以 用 实验 来 验证 的 . 
壁 如 说 ， 通 过 观察 手 里 拿 到 2 个 “ 爱 司 ”的 频率 来 验证 它 ， 观察 的 结果 是 : 只 需 把 
牌 洗 得 特别 句 ， 理 想 化 的 模型 确 是 将 经 验 描写 得 大 致 不 差 . 更 重要 的 是 ， 当 理想 化 
的 模型 发 生 问题 时 ， 那 就 有 可 能 使 我 们 进而 去 发 现 矛 盾 存 在 的 “可 以 推 淹 的 原因 ” 
例如 ， 需 要 改善 洗 牌 的 方式 ， 这 些 都 是 不 怎么 重要 的 例子 ， 但 它们 还 是 显示 了 假设 
模型 的 用 途 ， 更 有 趣味 的 情形 ， 在 以 后 还 会 谈 到 . 

例 (a) 可 辨别 的 球 . 在 1.2 节 例 (a) 中 ,很 自然 地 假定 所 有 的 样本 点 都 是 等 可 
能 的 ， 即 是 每 一 个 样本 点 都 具有 概率 1/27， 我 们 可 以 从 这 个 定义 出 发 来 研究 其 结果 . 
我 们 的 模型 是 否 和 实际 实验 很 相合 将 要 依赖 所 考虑 的 现象 的 类 型 .在 某 些 应 用 中 ， 
从 物理 意义 出 发 ， 可 以 作 “ 等 概 性 ”的 假设 ; 但 是 ， 在 另外 一 些 应 用 中 ， 它 之 所 以 
被 引进 只 是 作为 一 般 情形 的 一 个 最 简单 的 模型 ， 甚 至 有 时 很 明显 地 看 出 它 只 是 一 个 
粗糙 的 第 一 步 的 近似 ， 我 们 仍然 作 这 种 假设 ，【〈 例 如， 考虑 1.2 PH (b,1) 生日 ， 
(b,7) 电梯 问题 ,或 者 (b,11) 优惠 券 收 集 . ) 

(b) 不 可 辨别 的 球 : 波 司 - 爱 因 斯 坦 统计 ， 现 在 ， 我 们 回 过 来 考虑 3 个 不 可 辨别 的 
球 分 布 于 3 个 盒 中 的 1. 2 节 例 〈c)， 球 之 不 能 辨别 是 不 影响 实际 的 物理 试验 的 .从 物 
理 上 看 ， 它 们 仍然 有 27 种 不 同 的 可 能 ， 虽 然 其 中 只 有 10 种 可 以 辨别 .这 种 考虑 使 我 
们 对 表 1- 2 中 的 样本 点 可 以 按照 下 述 办 法 赋 概 : 


AR: 1 2 3 4 5 6 7 8 9 10 
Be i i i i i i i 1 1 2 
概率 27 27 27 9 9 9 9 9 9 9 


只 有 当 这 个 结论 在 1. 2 节 例 〈b) 中 所 抄录 的 许多 应 用 中 是 正确 的 时 候 ， 这 种 赋 
概 法 才 是 合理 的 .在 很 长 一 段 时 期 内 ， 我 们 的 结论 都 被 接受 下 来 ， 没 有 出 现 什么 问 
题 ， 而 且 把 它 作 为 统计 力学 中 的 个 球 分 布 于 n 个 盒 中 的 麦克 斯 书 - 玻 耳 兹 曼 统 计 的 
推导 基础 ， 但 是 ， 当 波 司 和 爱 因 斯 坦 证 明 某 些 质点 遵从 波 司 - 爱 因 斯 坦 统计 时 《详细 
情形 ， 参 见 第 2. 5 节 )， 才 引起 人 们 的 惊异 .在 我 们 的 情形 下 ，2z 一 ”一 3， 波 司 -有 过 内 
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斯 坦 给 这 10 个 样本 点 中 的 每 一 个 都 赋 以 概率 1/10. 

这 个 例子 将 要 说 明 ， 在 相同 的 样本 空间 中 可 以 有 不 同 的 赋 概 法 ， 并 且 还 将 说 明 
理论 和 实验 之 间 的 错综复杂 性 ， 特别 是 ， 它 告诉 我 们 不 要 过 分 地 信赖 前 面 的 结论 ， 
而 要 准备 接受 新 的 非 先 验 的 方案 . 

(c) 扔 硬币 .等 概 性 的 假设 常常 需要 真正 的 实验 的 记录 来 说 明 . 在 实践 中 ， 每 一 
个 硬币 总 不 能 绝对 均匀 ,但 是 ， 可 以 设计 一 个 物理 实验 ,使 其 与 理想 的 扔 硬币 的 模 
型 非常 近似 ， 为 了 给 出 一 个 期 望 的 波动 概念 ， 我 们 给 出 一 个 对 应 于 10 000 次 扔 便 币 
的 假想 的 试验 :， 表 1- 3 包含 了 每 100 次 试验 出 现 正面 的 次 数 ， 而 每 100 次 试验 对 应 
于 把 一 个 硬币 护 100 次 ， 其 总 数 为 4979. 看 了 这 些 数 字 以 后 ， 谈 者 很 可 能 会 产生 一 些 
含糊 的 感觉 : 这 说 明 什么 呢 ? 为 了 判断 对 什么 范围 来 说 能 使 经 验 事实 与 抽象 模型 一 
致 ， 需 要 一 些 更 高 深 的 理论 . (在 第 3.6 节 我 们 将 要 回 过 头 来 考虑 这 件 事 情 . ) > 


表 1-3” 扎 硬 币 的 统计 


试验 次 数 E m 总 数 

0 一 上 000 46 55 46 ol 53 501 
— 2 000 46 40 53 49 03 49 489 
—3 000 DZ ol 51 o3 909 
— 4 000 60 59 50 OZ 3 036 
— 5 000 ol ol 49 93 485 
—6 000 20 DZ 47 488 
—7 000 47 ol 49 93 500 
—8 000 92 D2 46 497 
一 9 000 5 47 DZ 人 >: 494 
— 10 000 41 51 48 39 484 
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基本 的 约定 ”给 定 一 个 含有 样本 点 已 ,EE,,… 的 离散 样本 空间 SS, 我 们 假定 对 每 
一 个 点 E 都 贼 以 一 个 数 ， 这 个 数 称 为 巨 ; 的 概率 ， 记 以 P(E;}， 这 些 数 都 是 非 负 的 而 
Fm 

PE +P(E,} ree = 1. (7.1) 

注意 ”我 们 并 不 排除 某 个 点 的 概率 为 0 的 可 能 性 ， 这 种 约定 看 起 来 是 人 为 的 但 

却 是 必需 的 ， 因 其 能 避免 一 些 复杂 性 ， 在 离散 的 样本 空间 中 ， 零 概率 在 实际 中 解释 


1. 这 个 表 实 际 记录 的 是 偶数 出 现 的 频率 ， 引 白 RAND 公司 的 《具有 100 000 正 态 离 差 的 一 百 万 个 随机 
数 》(Free Press it hig). 
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为 不 可 能 ， 因 此 ， 把 已 知 其 概率 为 0 的 样本 点 从 样本 空间 中 除去 是 无 妨 的 ， 然 而 ， 
事前 往往 不 知道 其 概率 的 数值 ， 因 此 ， 判 断 一 个 样 点 的 概率 是 否 是 正 的 需要 深刻 地 
推理 . 
定义 ”任何 一 个 事件 A 的 概率 P(A) 是 A 中 所 包含 的 样本 点 的 概率 的 总 和 . 
基本 方程 (7.1) 说 明 ， 全 样本 空间 的 概率 为 1]， 邑 P{S} 二 1. 由 此 推出 ， 对 任何 
一 个 事件 A, HA 
O<P(AS<1. (7. 2) 
现在 我 们 考虑 两 个 任意 的 事件 A MA, 为 了 计算 或 者 A BAL MAA 发 生 、 
或 者 两 个 都 发 生 的 概率 P{(A, UA,)}， 我 们 把 或 者 属于 A. RAR A 的 样本 点 的 
概率 加 起 来 ， 不 过 每 一 个 样本 点 只 算 一 次 、 因 此 ， 我们 有 
PIA UA SPA PA}. (7.3) 
如 果 五 是 一 个 既 属 于 4, 又 属于 A; 的 样本 点 ， 则 P{E} 在 右边 出 现 两 次 ， 而 在 左 
边 只 出 现 一 次 、 因 此 ,右边 比 左 边 大 P{A; A,}， 从 而 我 们 有 下 述 简 单 却 重要 的 定理 . 
定理 ”对 于 任何 两 个 事件 A fA, RA, KE, RA, RE, RA, A 都 发 生 


的 概率 由 
PA UA: =P(A) 十 PLA) 一 PPUAA:/ (7.4) 
所 给 出 ， 如果 AAS, BRAHA 和 A, 是 互 斥 的 ， 则 《7.4) 化 为 
PtAUA, }=P{A;}+P{A2>. (7.5) 


例 ”把 一 个 硬币 扎 两 次 .我 们 把 四 个 点 HH, HT,TH,TT 作为 样本 空间 ， 每 一 
点 赋 以 概率 1/4. SA 和 As 分 别 表 示 事 件 “ 第 一 次 出 现 正面 ”和 “第 一 次 出 现下 
Mm”. FRA 包含 了 HH 和 HT，A; 包含 了 TH 和 HH. AWA UA 包含 了 三 个 点 
HH,HT# TH, m AA 只 包含 一 个 点 HH. Alt 


PIAUA}=5+57-G=7" > 


n 个 事件 中 至 少 有 一 个 发 生 的 概率 P(4 UA Ue UA S 可 以 用 类 似 《〈7.4)》 的 公 
式 算出 ， 这 个 计算 将 在 第 4. 1 节 介 绍 . 这 里 我 们 只 注意 一 点 : 不 等 式 〈7.3) 显然 对 
一 般 情形 都 成 立 . 因此 ， eee nee Ay 不等式 


P{A, UA, U” A p TPA te (7. 6) 
立 ， 特 别 地 ， 当 Ai ,A: ,… 互 斥 了 时， kink 
P{A, UA, U SPA} tPA} re (7.7) 


有 时 称 (7.6) AAR (Boole) PFA. 

我 们 首先 考虑 一 个 简单 的 特殊 情形 ， 样本 空间 只 有 有 限 个 样本 点 ， 比 如 说 有 N 
个 ， 而 且 每 一 个 样本 点 的 概率 都 是 1/N， 在 这 种 情形 下 ， 任 何 一 个 事件 A 的 概率 等 
于 其 中 的 样本 点 的 个 数 除 以 N，、 在 早期 文献 中 ， 样 本 空间 中 的 点 叫 作 “情形 ”，A 
中 的 点 叫 作 “有 利 情形 ”( 有 利于 A)， 如 果 全 部 的 样本 点 的 概率 都 是 一 样 ， 则 事件 
A 的 概率 等 于 有 利 情 形 除 以 一 切 可 能 情形 .不幸 的 是 ， 这 种 叙述 被 滥用 来 作为 概率 
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的 “定义 ”<， 人 人们 第 第 以 为 每 一 个 有 限 的 样本 空间 中 的 全 部 样本 点 的 概率 都 是 一 样 


的 . 


其 实 ， 并 不 如 此 ， 例 如 扔 一 个 不 均匀 的 和 硬币， 样本 空间 只 包含 两 个 点 ， 正 面 和 


反面 ， 但 是 它们 可 以 具有 任意 的 概率 pg HP p 十 g 二 1， 一 个 新 生 儿 可 能 是 男 
tw Al pee eK, 但 是 实际 上 它们 的 概率 可 以 不 一 样 .。 第 6 节 例 (b) 给 出 了 一 个 
进一步 的 反例 . 全 部 样本 点 的 概率 都 一 样 的 样本 空间 的 用 处 几乎 全 部 局 限于 研究 机 
会 游戏 和 组 合 分 析 . 
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在 1,2,3,4,5 APRS PHBH T+, REM PHOT THR - +h. RES 
20 个 可 能 的 抽取 结果 都 具有 相同 的 概率 ， 试 求 有 一 个 奇数 在 如 下 情况 的 概率 . Ca) 第 一 
次 被 抽出 ; (bO 在 第 二 次 被 抽出 ; (0 两 次 都 被 抽 到 . 

在 1.2 节 例 (2 的 样本 空间 中 ， 给 全 部 27 个 点 以 相同 的 概率 ， 利 用 1.4 节 例 〈(d) 的 符 
号 ， 对 事件 ASS, A =S 来 验证 公式 (7.4).， SiS, 包含 多 少 样 本 点 ? 


考虑 数字 1,2,3,4 的 24 种 可 能 的 排列 ， 并 且 对 每 一 个 排列 都 赋 以 概率 序 ， 令 A 为 数字 i 


出 现在 第 i 个 位 置 (其 中 i==1,2,3,4) 的 事件 .验证 公式 (7.4. 

扔 一 枚 硬币 ， 直 到 它 连续 地 出 现 两 次 相同 的 结果 为 止 ， 设 扔 n 次 的 每 一 个 可 能 结果 都 具 
有 相同 的 概率 1/2"). 试 描述 这 个 样本 空间 ， 并 求 出 下 列 事件 的 概率 : a 实验 在 扔 第 6 
次 之 前 结束 ; (b) 偶数 次 结束 . 

在 1.5 节 例 (b》 的 样本 空间 中 ， 我 们 对 (x ) 中 恰巧 包含 个 字母 的 样本 点 赋 以 概率 1/2. 
( 换 句 话说 ，aa 和 bb 具有 概率 1/4，acb 具有 概率 1/8， 等 等 . ) (a) 证 明 ( x ) 中 的 样本 后 
的 概率 之 和 为 1 ，( x* x ) 中 之 两 个 样本 点 的 概率 为 0。(b) 证 明 a 胜 的 概率 为 5/14. b 胜 
的 概率 也 是 5/14， 而 c 胜 的 概率 为 2/7. (O ES k ARES k 局 前 无 法 判断 谁 胜 谁 全 的 
概率 为 /2 . 

变更 1. 5 节 例 (b)， 计 算 每 一 局 中 不 分 胜 负 的 可 能 性 ， 给 出 适当 的 样本 空间 ， 你 将 如 何 
定义 概率 ? 

在 习题 3 中 , 证明 A, AA CA, A AAAA. 

利用 1.4 节 中 例 Cd) 的 符号 证 明 (a) Si1S;:Ds= 二 0; (b) SDC; (c) E-DS D 
S; Dı. 

RART. CANKSHHMEARNH ST, 为 至 少 出 现 一 个 么 点 的 事件 . 试 描述 事 
件 AB,AUB,AB’. 如果 假定 全 部 36 个 样本 点 都 具有 相同 的 概率 ， 试 求 AB,AUB,AB 
的 概率 . 


. 在 例 1. 2 节 例 Ce) 中 ， 试 叙述 下 列 事件 的 意义 : (a) ABC; (b) A 一 AB; Cc) ABC. 
11. 
12. 


在 例 1.2 75) (eg) 中 ， 试 验证 AC CB. 

在 桥牌 游戏 中 ， 令 N (RE 一 1,2,3,4) 为 北 家 至 少 有 上 个 爱 司 的 事件 ， 以 Si, Er, We 分 别 
表示 南 、 东 、 西 各 家 至 少 有 上 & 个 爱 司 .在 事件 (a) Wi’; (b) NS; (c) N'S E’; 
(d) W.—W;; (e) NISIE Wi; (f) NsWis (g) (Ni US;)E: 中 ， 试 问 西 家 有 几 个 老司 ? 
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13. 


14. 


15. 


16. 


17. 


18. 


19. 


在 上 题 中 ， 试 验证 (a) SsCS,; (b) SW:=0; (c) NaS,E,W,=0; (d) N.S, CW; 
(e) ( N; U So }W;=0: (f) W =N S/E’. 


WRU TIERA.: 

(a) (AUB) =A'B'; (b) (AUB)—B=A—AB=ABP'; 
(c) AA=AUA=A; (d) (A—-AB)UB=AUB; 

(e) (AU B)—AB=AB' UA’B; (f) A UB’=(AB)’; 

(g) (AUB)C=ACU BC. 

化 简 : 


(a) (AUB)(AUB’); (b) (AUB)(CA,UB) (AUB); (2) (AUB)CBUC)， 
试 述 下 列 关 系 中 哪些 是 正确 的 ， 哪 些 是 错误 的 ， 


(a) (AUB)—-C=AU(B—-O); (b) ABC=AB(CUB); 

(© AUBUC=AU(B—AB) U(C—AQ) ; (d) AUB=(A—AB) UB; 

(e) (ABU BCUCA)DABC; (f) (ABUBCUCA)C(AUBUO); 
(g) (AUB)—A=B; (h) AB'CCAUB; 

(i) (AUBUC) 一 ABC ; G) (AUB)'C=A'CUBTC; 

(k) (AUB)'C=A'BC; (D (AUB)’C=C—C(AUB). 

令 A,B,C 为 任意 三 个 事件 ， 试 用 A,B,C 来 表达 下 列 事 件 : 

(a) RA ARH; (b) A 和 B 都 发 生 而 C ARE; 
(c) 所 有 这 三 个 事件 都 发 生 ，; (d A,B,C 中 至 少 有 一 个 事件 发 生 ; 
Ce) 至 少 有 两 个 事件 发 后; Cf) 恰 有 一 个 事件 发 生 ; 

(g) 怡 有 两 个 事件 发 生 ; (h) 没有 一 个 事件 发 生 ; 


(i) 不 多 于 两 个 事件 发 生 . 

任意 两 个 事件 之 并 AUB 可 表示 成 两 个 互 不 相 容 的 事件 之 和 , 例 AUB=AU(B 一 AB). 

试用 类 似 的 方式 表达 三 个 事件 A,B,C 之 并 . 

利用 习题 18 的 结果 证 明 
P{IAUBUC}=P{A}+P{B}+P{C}—P{AB}—P{AC}—P{BC}+P{ABC). 

[这 是 第 4 章 (1. 5) 的 特殊 情形 . J 


1, 注意 ，(AUB)' 表 示 AUB 的 补 集 ， 与 A'UB' 的 意义 不 同 . 同样 ，(4B) SAB 的 意义 亦 不 相同 . 
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这 一 章 的 目的 在 于 解释 一 些 组 合 分 析 的 基本 概念 ， 并 发 展 相 应 的 概率 背景 .最 
后 一 部 分 摘 述 一 些 价 单 的 分 析 技 巧 ， 本 书 不 需要 太 多 的 组 合 分 析 ， 对 此 没有 特别 兴 
趣 的 读者 可 以 尽快 地 读 第 5 章 ， 那 儿 将 再 次 回 到 第 1 章 的 理论 问题 主线 . 为 了 以 后 诸 
划 相 天 专题 的 需要 ， 最 好 阅读 本 革 的 有 关 个 别 的 证 . 

在 简单 的 机 会 游戏 、 抽 样 过 程 、 占 位 及 序 次 等 等 问题 里 面 ， 我 们 通常 遇 到 的 情 
况 古 有 限 样本 容 间 ， 各 个 样本 和 点 的 概率 相等 .这 时 ， 要 想 计 算 一 个 事件 A 的 概率 ， 
只 要 把 A 中 的 点 《有 利 情况 ) 的 个 数 ， 除 以 样本 点 (可 能 情况 ) 的 总 数 即 可 ， 如 果 
有 系统 地 使 用 几 条 法 则 ， 就 可 以 使 这 计算 更 容易 一 些 ， 现 在 我 们 就 来 把 这 些 法 则 加 
以 概括 .始终 遵循 着 几 个 标准 的 工具 ， 可 以 导致 思维 的 简化 和 脑力 的 节省 .我们 将 
要 遵循 这 样 的 进程 ， 而 不 是 在 一 个 一 个 的 特例 上 考究 最 简 涪 的 计算 方法 . 


2.1 预备 知识 


WF BE 个 元 素 aj as ay An SOE bbb, AAE RY Ho 
中 取出 一 个 元 素 配 成 对 子 (a;,b)， 一 共 能 配 成 mn 个 对 子 . 

证 (RFE RARE, EHTE mirn IEEE, FE (abh 恰巧 处 在 第 7 
行 和 第 & 列 的 交点 上 . 因此 ， 每 个 对 子 恰好 出 现 一 次 ， 从 而 逢 证 之 结论 乃 属 显然 . 

> 

例 (a) 桥 牌 (参阅 第 1.1 节 的 脚注 1)， 把 4 种 花色 和 13 种 面值 当 作 两 组 元 素来 
看 .每 张 牌 都 由 它 的 花色 和 面值 决定 ， 因 此， 这 样 的 组 合共 有 4。，13 二 52 种 ， 所 以 就 
有 52 SK. 

(b “vA”. 广告 上 叫 作 “七 用 灯 ” 的 ， 是 这 样 一 种 灯 : 它 有 3 个 普通 的 灯 
泡 ， 外 加 一 个 操纵 发 光 的 装置 ， 控 制 每 个 灯泡 3 个 不 同 程度 的 亮度 ， 但 也 可 以 不 开 
动 此 装置 ， 这 4 种 可 能 性 ， 每 个 都 可 以 和 0 个 、1 个 、 2 个 或 3 个 灯泡 结合 起 来 ， 所 
以 一 共有 16 个 组 合 ， 其 中 之 一 即 (0,0) 使 得 灯泡 一 个 也 不 亮 . 剩 下 还 有 15 种 操作 
方式 〈 不 是 7 种 ). > 

多 元 组 ”给 定 nn 个 元 素 asara, ;7 SICH Oy br ots by, + PRIMA HERI n, 个 
元 素 ziz…z， 从 以 上 各 组 的 每 组 中 取 一 个 元 素来 配 成 多 元 组 Cay, ,bj ott Tjo» 


L 有 兴趣 的 读者 可 以 在 经 典 的 教科 书 [4] 里 ， 找 到 很 多 初等 组 合 分 析 的 资料 ， 还 可 参阅 文献 L5], 
其 中 包含 700 个 附 有 完全 解答 的 问题 , 
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一 共 可 以 配 成 n，n。，。，…。，n, 个 多 元 组 . 

证 者 "一 2， 多 元 组 的 问题 归 为 对 子 的 问题 ， 因 而 我 们 的 命题 成 立 . A r 一 3， 
可 取 对 子 (a;50;) 作为 一 类 新 的 元 素 ， 则 有 Nl Me 个 对 于 和 Ns 个 元 素 Ceo 每 个 3 元 组 
(ai bco 本 身 可 以 看 作 由 (a;,b;) MICK c 所 组 成 的 一 个 对 于， 因此 3 元 组 的 个 
数 共 有 nmn 个， 用 归纳 法 可 以 证 明 ， 这 个 结论 对 每 个 r 都 成 立 . > 

上 述 定理 可 重 述 为 : 依次 序 有 7r 步 选择 ,第 上 步 有 nn, 种 选择 方式 ， 则 可 得 到 
none en, 种 不 同 的 结果 . 实际 上 ， 许 多 应 用 都 是 基于 该 表达 方式 的 . 

Gl 《c) 多 元 分 组 .假定 把 人 按 其 性 别 、 婚 否 和 职业 进行 分 组 ， 各 种 状况 束 相 当 
于 元 素 . 如 果 社 会 上 只 有 17 种 职业 ， 则 总 共 可 以 分 成 2 2. 17=68 组 . 

(d) 在 一 个 农业 实验 中 ， 要 试验 三 种 不 同 的 处 理 手段 〈 如 料 肥 、 喷 雾 剂 、 温 度 ). 
如 果 这 些 手段 分 别 有 Fiar 和 7 3 种 实施 的 水 平 或 浓度 ， 则 实施 的 方案 共有 717273 种 . 

(e)“ 把 球 置 入 金 中 ”归结 为 对 每 一 个 球 选取 一 个 盒 ， 对 于 rr 个 球 ， RIRA r 
次 独立 的 选取 ， 因 此 rr 个 球 置信 AEPA n 种 不 同 的 方法 回忆 第 1 章 1.2 市 例 
b 我 们 得 知 ， 有 很 多 实验 抽象 地 看 和 “ 球 置 人 盒 ” 是 等 价 的 ， 例如， 把 能 子 的 各 
个 面 都 看 作 “ 盒 子 ”， 依 前 面 的 命题 断言 :把 一 个 仍 子 掷 -次 共有 O PORE WAR 
其 中 有 5 个 结果 满足 “ 么 点 从 未 出 现 ” 的 条 件 ， 假 定 全 部 可 能 的 结果 都 是 等 可 能 的 ， 


“因而 -次 抛掷 中 不 出 现 ” 勾 点 的 概率 为 ( 二 ) ， 我 们 可 能 会 这 样 天 真 地 期 望 ; 掷 6 次 


股子 ， 么 点 一 定 出 现 ， 其 实 不 然 ， 这 一 事件 的 概率 仅仅 是 1 一 (二 )， 或 者 小 于 2/3 


[参见 2. 3 节 例 (b)]. 

(f) 挂 旗 [ 中 ， 一 个 较 深 的 例子 外， 考虑 有 r 面 不 同 颜色 的 旗帜 挂 在 排 成 一 行 的 nn 
根 旗杆 上 ， 共 有 多 少 种 挂 法 ? 当然 ， 我 们 忽略 旗帜 所 在 的 绝对 位 置 并 且 不 限制 一 根 
旗杆 所 能 挂 的 旗帜 的 面 数 ， 我 们 仅仅 假定 旗帜 挂 在 每 一 根 旗杆 上 都 是 按 确定 的 次 序 
SA Tot ig BU ER BRB. 

挂 旗 可 以 设计 成 这 些 单个 的 旗帜 接连 做 > 次 决定 ， 对 于 第 1 面 旗帜 来 说 ， 我 们 在 
这 交 根 旗杆 中 任意 选取 一 根 . 这 一 根 旗杆 挂 上 一 面 旗帜 后 ， 它 就 分 成 了 两 六， 于 年 
第 2 面 旗帜 选择 悬挂 位 置 时 就 有 ntl 种 可 能 ， 类 似 地 ， 第 3 面 旗帜 选择 悬挂 位 置 时 
就 有 nt+2 种 可 能 ， 依 此 类 推 ，…… ， 等 等 ， 这 ~ 面 旗帜 就 有 : n(n 1) (nt2) (nt 
7 一 1) 种 不 同 的 挂 法 . > 


2.2 有 序 样 本 


考虑 n PILE a, ,az 0° a, 所 组 成 的 集合 或 总 体 ， 任 何 7 个 元 素 aj sajta, 的 
有 序 排列 ， 就 称 为 从 总 体 中 取出 的 ， 大 小 为 7 的 一 个 有 序 样本 ， 为 了 形象 化 起 见 ， 我 
们 可 以 设想 ， 元素 是 逐个 地 抽取 的 .于 是 就 有 两 种 可 能 的 手续 .第 1 种 是 有 放 回 的 
抽样 ， 在 这 里 ， 每 个 元 素 的 抽取 都 是 在 整个 总 体 中 进行 的 ， 所 以 同样 的 元 素 可 以 锌 
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抽 到 一 次 以 上 ， 因 此 在 样本 的 排列 中 容许 有 重复 的 元 素 ; 第 2 种 是 无 放 回 的 抽样 . 
fel, SPR BRR, BRM ERA. ARAM, REG BSR. 
显然 ， 在 这 种 情况 ,样本 的 大 小 不 能 超过 总 体 的 大 小 nn. 

在 有 放 回 的 抽样 里 ， 样 本 的 7 个 元 素 的 每 一 个 都 可 以 有 7 种 抽取 的 方式 ， 所 以 可 
能 的 样本 数 为 x， 这 一 点 从 刚才 的 定理 可 知 ， 只 要 让 定理 中 的 二 二 … 二 nn Bay, E 
无 放 回 的 抽样 里 ， 样 本 的 第 1 个 元 泰 可 以 有 7 种 抽取 方式 ， 而 第 2 个 则 只 有 (mn 一 1) 
种 ,第 3 个 只 有 (x 一 2) 种 ， 依 此 类 推 . 根据 上 述 定 理 可 知 ， 无 放 回 抽样 的 样本 总 数 
是 nn 一 D1…(n 一 r 十 1)， 这 个 乘积 经 常 出现 ， 为 了 方便 起 见 ，3 引 进 记号 

(n), 一 ?2 一 1) (nr 二 1). (2.1) 
BA, 4ronh, G),=0. 于 是 我 们 有 下 面 的 

定理 ”从 nn 个 元 素 所 成 的 总 体 中 ， 取 大 小 为 + 的 抽样 . 如果 抽样 是 有 放 回 的 ， 则 
Bn 个 不 同 的 样本 ; 如 果 抽 样 是 无 放 回 的 ， 则 有 CD, 个 不 同 的 样本 . 

我 们 注意 ran 的 特别 情形 ， 在 无 放 回 的 抽样 中 ， 一 个 大 小 为 n 的 样本 包含 了 其 总 
体 的 全 部 元 素 ， 它 构成 了 其 全 部 元 素 的 一 个 排列 . 因此 , nR asta, 有 (n), = 
n，。(《n 一 ])…2。1 种 不 同 的 方式 排 成 次 序 ， 我 们 用 符号 n! 来 代替 (nm), ,n! 是 一 个 常用 的 
F5. A, RITA 

HR nn 个 元 素 能 排 成 的 不 同 次 序 的 数目 为 

nl CO 二 n(n—1)"2.。1. (2. 2) 

例 (a)3 个 人 A，B 和 C 是 从 人 这 个 总 体 中 抽出 来 的 一 个 有 序 样 本 ， 他 们 的 生 
日 是 日 历 这 一 总 体 中 的 一 个 样本 ， 他 们 的 年 龄 是 3 个 数 这 一 总 体 的 一 个 样本 . 

(b) 如 果 用 “10 个 字母 的 词 ”代表 一 个 由 10 个 字母 构造 的 序列 《也 许 没 有 意义 )， 
那么 这 个 词 就 是 由 26 个 字母 构成 的 总 体 中 的 一 个 样本 ， 由 于 允许 字母 重复 出 现 ， 就 有 
262 个 这 样 的 词 ， 另 一 方面 ， 在 铅字 排版 印刷 厂 里 ， 字 母 不 仅 在 概念 上 而 且 在 实物 上 存 
在 于 打印 形式 之 中 .为 简单 计 ， 假 定 每 个 字母 恰 备 有 1 000 枚 可 供 使 用 . 印刷 者 每 排 
印 一 个 词 ， 就 需要 选择 10 枚 ， 此 处 是 不 允许 重复 的 .一 个 词 有 “(26 000)io 种 不 同 的 排 
法 . 这 个 数 与 26 000° BAB, EMT 10“. 

(c) 史 密斯 夫妇 是 从 人 的 总 体 里 抽出 的 大 小 为 2 的 一 个 样本 ， 也 是 从 所 有 夫妇 所 
构成 的 总 体 抽 出 的 大 小 为 1 的 一 个 样本 .这 个 例子 说 明 : 样本 的 大 小 只 有 相对 于 给 
定 的 总 体 来 说 才能 确定 . 又 如 把 一 个 硬币 扔 r 次， 可 看 作 从 字母 H 和 工 所 构成 的 总 
体 中 抽出 的 大 小 为 r 的 样本 ， 也 可 看 作 由 旦 和 下 (共有 7 个) 组 成 的 排列 ， 也 就 是 样 
本 空间 〈 对 应 于 扔 硬币 > 次 的 实验 的 那个 空间 ) 的 一 个 梓 本 点. | 

(d) 关 于 实际 中 的 排序 与 抽样 . “SRR RR AE AA S A 
时 ， 人 们 的 直 沉 是， 次序 在 样本 中 是 不 相干 的 ， 因 而 想像 样本 是 无 序 的 . 但 是 ， 只 
有 基于 某 些 概率 假设 ， 从 样本 才 有 可 能 得 出 结论 ， 为 此 ， 一 个 适当 的 获取 样本 的 理 


1. 记号 (mn), 并 不 是 标准 的 ， 甚 至 ?不 是 整数 时 ， 本 书 也 一 贯 地 用 它 . 
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想 的 实验 模型 是 必要 的 。 因 为 这 种 实验 显然 包含 了 选择 是 彼此 能 分 辨 的 ， 即 选择 是 
按 某 种 方式 标号 的 ,为 了 理论 上 的 需要 ， 最 简单 的 是 用 整数 来 标号 ， 这 就 等 于 给 样 
本 以 次 序 。 其 他 方法 或 许 更 好 ， 但 是 ， 连 “星期 二 被 琢 斯 第 三 个 面试 的 人 ”部 产 生 
标号 ， 换 言 之 ， 即 使 序 在 样本 中 最 终 被 忽略 掉 ， 理 想 的 实验 仍然 包含 了 有 序 样本 ， 
并 且 我 们 将 会 看 到 这 会 影响 到 适当 峰 概 . > 

从 大 小 为 n 的 总 体 中 依次 抽取 r 个 元 素 ， 实 验 的 可 能 结果 束 是 这 些 大 小 为 r 的 样 
本 . 它们 的 总 数 是 ww 或 (n),， 和 随 抽 取 的 方式 是 否 有 放 回 击 定 . 无 论 哪 -种 情况 ， 我 
们 的 理想 实验 是 用 样本 空间 来 描述 的 ， 其 中 每 一 个 个 别 的 点 都 代表 大 小 为 7 的 一 个 
样本 . 

到 此 为 止 ， 我 们 还 没有 谈 到 过 联系 着 这 些 样 本 的 概率 我们 通 浓 赋 子 各 个 样本 以 
相等 的 概率 ， 这 样 的 样本 就 叫 作 随机 样本 . “随机 ”这 个 词 在 其 一 般 的 意义 上 还 没有 和 定 
X, 但 是 用 在 抽样 或 选择 的 场合 时 ， 它 倒是 有 着 特定 的 意义 的 ， 无 论 何 时 ， 只 要 我 们 
谈 到 固定 大 小 为 的 随机 样本 时 ， 形 容 词 “随机 的 ”意味 着 所 有 可 能 的 样本 都 具有 相 
同 的 概率 .在 有 放 回 抽样 中 ， 这 个 相同 的 概率 就 是 nw"; 而 在 无 放 回 抽样 中 ， 则 为 
1/《n),，n 表示 取样 本 的 那个 总 体 的 大 小 ， 如 果 n 大 而 7 相对 地 小 ， 则 比值 (wn),/x 接近 
于 1， 这 就 说 明了 这 样 的 一 个 事实 : 如果 总 体 大 而 样本 相对 地 小 ， 有 无 放 回 的 二 种 抽 
样 方 式 的 区 别 是 可 以 忽略 的 [参看 11. 1,11.2 和 第 6. 10 节 习 题 35 J. 

上 面 已 经 引进 了 应 用 的 术语 “随机 的 ”>， 但 是 尚未 说 明 我 们 的 随机 抽样 的 模型 对 
于 现实 世界 的 适用 性 ， 扔 硬币 、 据 贷 子 和 和 类似 的 一 些 游戏 ， 都 可 以 解释 为 有 放 回 的 
随机 抽样 的 实验 ， 并 且 我 们 所 赋 给 的 概率 很 接近 于 在 长 期 持续 实验 下 所 观察 到 的 频 
率 ， 即 使 完全 均匀 的 硬币 和 山子 并 不 存在 .从 一 副 洗 得 很 好 〔( 比 平常 洗 得 还 要 好 ) 
的 纸牌 中 ， 连 续 地 进行 抽取 ， 就 是 无 放 回 抽样 的 一 个 典型 例子 . 在 人 口 的 抽 梯 中 ， 
统计 学 家 往往 遇 到 无 法 预料 的 巨大 困难 . 经 验 表 明 ， 在 这 种 场合 ， 其 至 连 随 机 性 的 
粗略 的 形象 都 是 不 容易 获得 的 ， 

练习 ”在 无 放 回 抽样 中 ， 总 体 中 任何 一 个 固定 的 元 素 包含 在 大 小 为 > 的 随机 样本 


中 的 概率 为 
(一 1)， ， nT7r_r 
l— (n), =l n nn 
在 有 放 回 的 抽样 中 ， 其 对 应 的 概率 为 
1—(1—1/n). 
2.3 fl F 


我 们 考虑 从 一 个 包含 nn 个 元 素 ai,…,a, 的 总 体 中 抽出 一 个 大 小 为 r 的 有 放 回 的 
随机 样本 ， 我 们 感 兴趣 的 是 “样本 (a; ，…,a; ) PRAB ROR” 的 事件 的 概率 ， 
也 就 是 ， 这 种 样本 可 以 从 无 放 回 的 抽样 所 得 到 ， 前 面 的 定理 证 明了: 不 同 的 样本 的 


2.3 Fil Ff 20 


DREN T, EPEN), 个 满足 上 述 条 件 . (BES PE AB ES BE. UT ae 
言 : 在 我 们 的 样本 中 没有 重复 的 概率 为 


) p | 
p= hs nT Dena rt) 3.1) 


rt n 
下 面 关 于 这 个 公式 的 具体 解释 将 显示 出 这 个 公式 的 广泛 应 用 . 

(a) 随机 抽样 数 . 令 总 体 由 数字 0,1,…,9 所 构成 ， 每 次 连续 抽 5 个 数字 构成 的 
排列 是 一 个 大 小 为 r=5 的 样本 ,我 们 假定 每 一 种 排列 的 概率 都 是 10“. 由 (3.1) 5 
个 连续 随机 数字 都 不 相同 的 概率 为 p 二 (10);10 “二 0. 3024. 

根据 我 们 直观 的 想法 ， 在 小 数位 很 多 的 大 的 数学 表格 里 ， 最 末 5 位 数字 具有 很 
大 的 随机 性 〈 在 普通 的 对 数 表 和 其 他 一 些 表 里 ， 表 差 近似 地 为 常数 ， 因 此 最 末 一 位 
小 数 是 有 规则 地 变动 的 )， 作 为 一 个 实验 ， 选 取 有 16 位 数 的 表 ， 并 把 表 中 所 列 的 那 
些 最 末 的 5 位 数字 者 不 相同 的 数 枚 举 出 来 ， 在 每 组 有 100 个 数码 的 最 初 12 个 组 中 ， 
人 

小 样本 理论 证 明 ， 这 样 起 伏 的 量 会 很 好 地 落 在 期 望 限 度 以 内 .这 里 的 平均 频率 
0312. BI 仓 上 的 概率 0. 3024 是 十 分 近似 的 [参阅 第 7. 3 节 中 例 CD J. 

下 面 ， 我 们 来 考虑 数 e 二 2. 718 28…， 把 最 初 的 800 位 小 数 … 160 段 ， 每 段 
有 5 个 数字 . 并 以 每 组 10 段 排 成 16 组 ， 在 这 16 组 中 ， 所 有 5 个 数字 都 不 相同 的 列 
举 如 下 : 

3,1,3,4,4,1,4,4,4,2,3,1,5,4,6,3. 
频率 的 波动 应 该 在 0. 3024 周围 ， 据 小 样本 拟 合 理论 ， 上 下 波动 的 振幅 并 不 比 所 期 望 


的 大 .在 这 160 段 里 ， 我 们 所 考虑 的 事件 的 整个 频率 为 2 一 0 325. 它 很 合理 地 近 


160 

(WF p=0. 3024, 

(b) wR n ARMM HAN AEP., 每 一 个 全 都 放 球 的 概率 为 n! /1". 这 个 概 
率 非 常 小 ， 对 n= 7 来 说 ， 它 为 0.006 12+. 这 就 意味 着 如 果 在 一 个 城市 中 每 一 周 发 
LT 次 意外 的 事件 ， 则 假定 各 种 分 布 痢 是 等 可 能 的 ) 实际 上 每 一周 都 包含 有 这 样 
一 些 天 ， 它 发 生 两 件 或 两 件 以 上 的 意外 事件 ， 平 均 来 说 ， 大 约 165 周 才 有 一 周 每 一 
天 都 发 生 一 件 意外 的 事件 ， 这 个 例子 说 明了 随机 性 的 一 个 意料 不 到 的 性 质 (7 个 球 置 
入 7 个 盒 中 的 全 部 可 能 情形 在 第 5 节 表 1 中 都 列 出 了 ， 两 个 或 两 个 以 上 的 盒 空 着 的 概 
率 大 约 为 0.87)， 当 n=6 时 ， 概 率 n!n "SF 0.015 43… 这 说 明 把 一 个 均匀 仍 子 卷 6 
次 ， 要 得 到 每 一 次 出 现 的 点 数 都 不 相同 是 如 何 得 不 容易 . [一 个 给 定 的 点 不 出 现 的 概 


EKA. BS 参见 2.1 WH Ce) I. 


(c) 电梯 ， 在 开始 时 载 有 7 CREWE, Æ n=l 层 的 楼 房 的 每 一 层 上 都 
停留 ， 试 问 没 有 2 位 乘客 在 同一 层 楼 离开 电梯 的 概率 p 为何? 为 了 使 问题 确定 起 见 ， 
假定 乘客 离开 电梯 的 各 种 安排 有 同等 的 概率 〈 这 只 是 大 概 粗略 的 近似 )， 于 是 

b 一 10-7(10), 一 (10。9.。8.7.6.5.4)10 =0. 060 48. 
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假使 这 事件 一 旦 发 生 ， 我 们 就 认为 发 生 这 件 事 是 奇特 的 ， 反 复 观 察 ， 发 生 的 可 能 性 
.在 1 000 次 中 只 出 现 一 次 〈 人 参见 2. 10 节 习 题 43 的 答案 ). 

(d) 生日 。 任意 r+ 个 人 的 生日 可 以 看 成 为 从 一 年 的 全 部 日 子 所 构成 的 总 体 中 抽取 
的 大 小 为 7 的 一 个 样本 .虽然 每 年 的 时 间 不 是 等 长 的 ， 而 且 在 整个 一 年 中 ， 人 的 出 生 
率 也 不 是 固定 不 变 的 但是， 作为 第 一 步 近似 ,我 们 还 是 可 以 认为 随机 地 抽取 人 和 
随机 地 抽取 生日 是 一 样 的 ， 其 次 ， 为 了 简单 起 见 ， 每 年 就 以 365 日 来 考虑 . 

有 了 这 种 约定 利用 (3. 1) ， 我 们 算出 所 有 企 生 日 都 不 相同 的 概率 户 为 ” 


p= (1—3) (1-3) (1 ges): (1S). (3. 2) 


其 结果 是 令 人 吃惊 的 .对 r= 23 个 人 来 说 ， pcs 也 就 是 说 ， 对 23 个 人 来 说 ， 至 少 


有 两 人 同一 天 生日 的 概率 超过 二 


公式 G.D) 看 来 十 分 繁琐 ,但 是 可 以 容易 地 推出 近似 表达 式 ， 如 果 r 较 小 ， 所 
有 的 交叉 乘积 因子 都 可 以 忽略 ， 于 是 有 了 第 一 步 的 近似 公式 


1 十 2 十 … 十 (7 一 1) rl) 
365 730 ” 


例如 当 r 二 10 时 ， 正 确 的 数值 为 p 二 0. 883…， 而 (3.3) 给 出 的 近似 值 为 0. 877. 
对 于 较 大 的 > 可 以 用 对 数 法 求 得 很 好 的 近似 值 . 只 要 z HERR. A 
log (1 一 zs 一 于 是 由 (3.2) 可 得 


1 二 2 十 … 十 (r 一 1) rOl) 
365 730 ` 


对 于 一 30， 这 个 公式 给 出 的 近似 值 为 0.3037， 而 正确 值 为 p=0. 294. X F r<40, 
(3.4) 的 误差 小 于 0.08 (在 第 7 节 中 继续 讨论 此 问题 ， 也 可 参见 2. 10 节 问 题 44 Ss 
案 ). 


a] (3.3) 


log p= (3. 4) 


2.4 子 总 体 和 分 划 


和 以 前 一 样 ， 我 们 用 大 小 为 的 总 体 来 表示 一 个 由 n 个 元 素 构 成 的 不 分 次 序 的 集 
合 。 所 谓 两 个 总 体 不 一 样 ， 当 且 仅 当 一 个 总 体 有 一 个 元 素 不 属于 男 一 个 总 体 . 

从 一 个 大 小 为 n 的 总 体 里 选取 7 个 元 素 就 构成 了 一 个 大 小 为 + 的 子 总 体 ， 对 这 子 总 体 
中 的 元 素 随意 编号 将 其 转化 为 大 小 为 r 的 有 序 样本 ， 每 个 这 样 的 样本 都 可 以 用 这 种 方式 
获得 ， 既 然 r 个 元 素 有 r! 种 不 同 的 标号 方式 ， 由 此 可 得 样本 的 个 数 是 大 小 为 的 子 总 体 
个 数 的 r! 倍 ， 所 以 大 小 为 + 的 子 总 体 的 个 数 为 (mn),/rl .上 式 称 为 二 项 式 系数 ， 记 为 


(") == n(n—1)+ (nort 1) 


r r| ] e2. s o (r—l) er (4. 1) 


因此 ， 我 们 证 明了 


2.4 FS 7 272A 
定理 1 一 个 包含 个 元 素 的 总 体 可 以 产生 (”) 个 不 同 的 子 总 体 ded 


换 名 话说， 从 个 元 素 中 可 以 用 (”) 种 不 同 的 方法 选 出 包含 个 元 素 的 子 总 体 ， 
因为 从 nn 个 元 素 的 总 体 中 选取 r 个 元 素 和 留 下 2 一 ”个 是 等 价 的 ， 因 此 ， 对 1l<r<n 


显然 有 
=Z) (4.2) 
为 了 直接 证 明 方 程 (4. 2) ， 我 们 只 须 注 意 : 把 二 项 系数 4.1 换 成 下 面 的 写法 


")=5 Caer (4. 3) 

[只 需 把 (4. 1) 的 分 子 分 母 同时 乘 以 (x 一 站! 即 得 (4. 3). ] 注意 ; 方程 a.D HA 

边 当 r==0 时 是 无 定义 的 ， 但 右边 却 是 有 定义 的 .为 了 使 4.2) 对 一 切 满足 Sra 

(0)=1, 01 ==1]， ` (4. 4) 
All (2), =1. 

例 (a) 桥 牌 和 扑克 (参见 第 1 章 脚注 1)、 因 为 在 一 个 人 的 手中 的 牌 的 次 序 是 互 


不 相干 的 ， 前 面 的 定理 证 明了 一 副 纸牌 有 (7 ) 一 635 013 559 600 手 不 同 的 桥牌 和 
(~ )=2 598 960 手 不 同 的 扑克 ， 让 我 们 来 计算 一 手 扑克 包含 5 张 不 同 面值 的 概率 r. 
这 些 面值 可 以 用 ( 种 方法 选取 ,而且 对 应 于 每 一 张 牌 我 们 可 以 自由 地 在 四 种 花色 


中 的 一 种 中 选取 ， 由 此 推出 z= 各 (OO )= (OP), ERR 0.5071. FH 


牌 中 ，13 张 面值 都 不 同 的 概率 为 4 二 (°°), 或 者 近似 地 为 0. 000 105 7. 


(b)50 个 州 中 每 州 有 2 个 参议 员 . 考虑 由 其 中 任意 选取 50 个 参议 员 组 成 委员 会 
这 样 的 事件 .假设 (1) 指定 某 州 要 有 代表 ; (2〉 所 有 的 州都 要 有 代表 . 

在 第 一 种 情形 ， 其 逆 事 件 的 概率 g 要 好 算 些 ， 所 谓 逆 事 件 ， 就 是 指定 的 那个 州 没 
有 一 个 代表 作为 委员 . 总 共 100 个 代表 中 ， 有 98 个 不 是 那个 州 的 代表 ， 因 此 


_ /98\ //100\ 50°49 _ B 
a= (55)/ Co) “10089 0. 244i 


其 次 ， 第 2 节 的 定理 证 明 : 委员 会 要 使 每 一 州都 有 一 个 代表 的 选取 方式 共有 2 种， 


因此 ， 所 有 的 州都 有 委员 的 概率 为 p=2 | ( so )， 利 用 斯 特 林 公式 参见 第 9 节 )， 


可 证 po Jon +5 + 2-4, 126 + 107". 
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(0) 占 位 问题 。 我 们 再 一 次 考虑 + 个 球 随机 地 分 布 于 个 盒 中 即 是 wr 种 可 能 的 
排列 都 具有 概率 n")， 为 了 找 出 一 个 给 定 的 金 中 恰巧 包含 个 球 《k 一 0,1,2,……，7) 
的 概率 ps， 我 们 首先 注意 : 个 球 可 以 有 ( ; ) 种 方式 选取 ， 而 剩 下 的 r 一 个 球 放 人 
剩 下 的 一 1 个 盒 的 方式 有 (Cn 一 D 一 种 ， 由 此 推出 


r 1 pr ] 1\"* 
p=(p) toe Gab =( ez 07) . (4.5) 
这 就 是 所 谓 二 项 分 布 的 一 种 特殊 情形 ， 二 项 分 布 将 在 第 6 章 中 讨论 .数值 可 以 从 第 6 
章 表 3 PH. > 


可 分 辨 与 不 可 分 辨 的 元 素 的 区 别 类 似 于 子 总 体 与 相应 的 有 序 样 本 之 间 的 关系 . 
删 去 一 个 由 7 个 元 素 a;，…,a, 构成 的 排列 〈 或 群 ) 的 全 部 下 标 ， 就 得 到 一 个 由 了 个 不 
可 分 辩 的 字母 构成 的 排列 ， 反 之 ， 把 它 一 类 排列 中 的 ~ 个 字母 各 标 以 一 个 数字 ， 就 得 
到 了 一 个 由 字母 a; ,…,a, 构成 的 排列 ， 这 种 办 法 可 以 提供 xr! 种 不 同 的 排列 ， 显 然 ， 
变换 a, 和 a 的 位 置 得 到 一 次 重 排 ， 下 面 的 例子 说 明 : 如 何 利用 这 种 原理 并 把 它 推 广 
到 元 素 (a) 仅 有 部 分 相同 的 场合 . 

例 〈d) 一 种 或 两 种 颜色 的 旗子 . 在 2.1 节 例 D 中 , 证 明了 >- 面 不 同 颜色 的 旗 
昌 挂 在 n 根 族 杆 上 有 入 二 n(n 十 1)…(n 十 7 一 1) 种 挂 法 .现在 考虑 类 似 的 问题 ， 但 所 有 
的 族 帜 的 颜色 都 是 一 样 的 《 即 是 不 可 辨 的 );， 把 每 一 种 这 类 挂 法 的 每 一 面 旗帜 标 以 一 
个 数字 ， 就 得 到 了 面 可 辨 的 旗帜 的 x! 种 挂 法 ， 于 是 ~ 面 同 一 种 颜色 的 旗帜 的 挂 法 
恰巧 为 N/r! 种 . 

其 次 ， 若 这 MA p 面 是 红 的 (不 可 辨 的 ) 有 9 面 是 蓝 的 〈p 十 gq 二 r+)， 标 有 
-个 数字 的 旗帜 的 每 一 种 挂 法 可 以 由 红旗 标 以 1 至 p, WEERA p 十 1,…,p 十 9 的 相 
应 的 挂 法 而 得 到 .于 是 现在 共有 N/b! qa ) 种 挂 法 . 

(e) 包 仿 两 类 元 素 的 次 序 . 考虑 一 个 长 为 p 十 g 的 由 Pp 个 a 和 9 个 8 构成 的 序列 ， 
对 a 标 以 数字 1 到 p, HERAF pta p 十 q， 于 是 得 到 一 个 由 p 十 9 个 可 辨 的 元 
索 构 成 的 序列 .有 Cota)! 这 样 的 序列 ， 其 中 有 p! gt 种 对 应 于 a 和 8 的 相同 的 排 
列 ， 因 此 ，p 个 a 和 9 个 有 B 恰巧 有 

(pi+q)! =(P) = (21) 
pla! p q 
种 可 辨 的 排列 . 

同样 的 结果 可 以 从 定理 1 和 下 列 事实 直接 得 到 : p 个 a Ma 个 8 的 全 部 次 序 可 以 
M pta 个 可 能 的 位 置 中 选取 户 个 位 置 放 人 a 而 得 . 

(有 连结 一 张 模 盘 的 两 个 对 角 的 顶点 的 最 短 的 多 边 形 的 轨道 〈 包 括 横 向 的 和 维 加 
的 线段 ) 的 数目 是 


(%» )=12 870. > 
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ry tre tetr En, r,20 (4.6) 
的 整数 ， 把 一 个 包含 nn 个 元 素 的 总 体 分 成 上 个 有 序 的 部 分 (分 为 上 个子 体 )， 其 中 第 
一 部 分 包含 门 个 元 素 ， 第 二 部 分 包含 7, 个 元 素 ， 等 等 ， 这 种 分 法 共有 
nl 
Pip (4,7) 
[ 数 (4.7) 巴 作 多 项 系数 . ] 
注意 ， 子 总 体 之 闻 的 次 序 是 必要 的 ， 壁 如 (7, —2.7=3) 和 (1, =3.m=2) R 
表 不 同 的 分 法 ; 然而 ， 组 内 之 间 的 次 序 是 无 关 紧 要 的 .同时 还 要 注意 : 01 三 1， 所 以 
r 等 于 0 时 并 不 影响 公式 《4.7)， 由 于 允许 1; 二 0,n 个 元 素 划 分 为 少 于 或 等 于 个 子 
群 ， 恰 巧 分 成 个子 类 ， 即 x;>0 的 情形 将 在 2.11 PIMT PAB. 
证 ”反复 利用 (4.3) 可 以 证 明 数 (4.7) 能 够 瑟 成 下 述 形 式 : 


I)  e 


另 一 方面 ， 为 了 作成 需要 的 划分 ， 我们 首先 从 给 定 的 个 元 素 中 选取 ri 个 ; BAR 
下 的 nor 中 选取 大 小 为 的 第 2 组 ， 等 等 ， 当 第 & 一 1 组 选 出 以 后 ， 还 剩 下 2 一 六 一 
Po 889 Fp Fp TUR 而 这 些 元 素 就 构成 最 后 1 z. 我 们 断言 ， 构成 上 述 划 分 的 
办 法 共有 (4.8) 所 确定 的 数目 那样 多 . > 

Gl (g) 桥 牌 ， 在 一 场 桥 牌 比 赛 中 ，52 张 牌 分 成 四 组 ， 每 组 13 张 ， 因此, 不同 
的 情形 共有 521，(131)- 一 (5. 36…)。1023 种 ， 让 我 们 计算 每 一 个 参与 者 都 有 一 张 爱 
司 的 概率 ，4 张 爱 司 可 以 排 成 4! = 24 种 不 同 的 排列 次 序 ， 而 每 一 种 次 序 代表 给 每 个 
参与 者 一 张 爱 司 ， 剩 下 的 48 张 牌 有 (481)、 (121)“ 种 分 配方 式 .， 因此 所 要 求 的 概 
RI 

24 » 48! 。(13)4/1521 一 0. 105". 

MRF. F212 SATB. TAFE 6* 个 不 同 的 结果 ， 它 们 都 被 赋 以 相同 
的 概率 ， 每 点 出 现 二 次 的 事件 ， 即 把 12 个 仍 子 排 成 6 组 ， 每 组 2 个 ， 因此， 这 事件 
的 概率 为 121 /(25。62 ) 一 0.003438…'， > 
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第 1. 2 节 的 例子 显示 ， 把 7 个 球 随机 地 放 入 7 个 盒 的 模型 具有 广泛 的 应 用 ， 在 许 
多 场合 ,需要 处 理 不 可 辩 的 球 . 例 如， 工作 日 中 事故 的 分 布 的 统计 研究 ， AP 
日 的 分 布 ， 人 们 仅仅 对 发 生 的 次 数 感 兴趣 ， 并 不 对 事故 中 的 个 体感 兴趣 .再 如 ， 撕 r 
GLE EH > 个 球 置 于 nn 二 6 个 盒 中 ， 虽 然 可 能 追踪 ~ 颗 骨 子 的 结果 ,但 主要 的 
ERCA, Wa ee 的 个 数 ， 在 这 些 场 合 ， 我 们 仍然 假定 这 些 球 是 标 有 号 码 的 ， 


1. 这 一 节 的 内 容 是 很 有 用 的 ， 而 且 是 富有 启发 性 的 ， 不 过 以 后 不 是 明显 地 用 到 . 
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但 是 我 们 的 注意 力主 要 集中 在 这 样 一 些 事 件 , 人 它们 与 标号 是 无 关 的 ， 这 一 个 事件 ， 
完全 由 占 位 数 rror, TZN, Wb r 表示 第 有 个 盒 中 装 有 的 球 的 个 数 . 每 一 个 
n 元 整数 组 满足 : 
ri tr tee tr, Sr, r,-20, (5. 1) 
且 它 描述 了 占 位 数 的 一 个 可 能 结构 .只 有 当 对 应 的 于 元 组 (norton) 不 恒 等 时 ， 
不 可 半球 的 下 列 两 类 分 布 才 是 不 同 的 : 
(i) 可 区 别 的 分 布 的 数目 [ 即 方程 式 (5. 1) 的 不 同 解 」 是 


At) s2 


GD 没有 一 个 金 是 空 的 可 区 别 的 分 布 的 数目 是 (7 1 ). 

证 ”我 们 用 x 十 1 条 | 把 空间 分 成 nn 个 盒 ， 而 用 * 代表 球 ， 因 此 符号 
代表 这 样 一 个 分 布 : r= 二 8 个 球 放 于 n= 二 6 个 盒 中 ， 其 占 位 数 为 3,1,0,0,0,4， 这 样 的 
符号 的 开始 和 终结 必需 有 一 条 | ,但 是 其 余 的 n 一 1 条 | 和 rr 个 * 可 以 按 任 意 次 序 排 
列 ， 用 这 种 方法 可 以 看 出 ， 可 区 别 的 分 布 数 等 于 从 x 十 一 1 个 位 置 中 任 取 7 个 位 置 的 
AE, MEA.. (i) 得 证 ， 没 有 一 个 盒 是 空 的 相当 于 没有 两 条 | 靠 在 一 起 .但 7 个 星 
之 间 空 出 r 一 1 个 位 置 ， 而 这 7 一 1 个 位 置 中 有 7 一 1 个 被 | 所 占 位 ， 因此， 我 们 有 
(“二 1) 种 可 能 的 选择 ， 这 就 证 明了 (ii)， > 

例 (ad BB r ARTERIET ATLL eRe T ) 个 

(bb) 偏 导数 ， 一 个 nn 个 变 元 的 解析 函数 请 (zi ，…,zx,) 的 r 阶 偏 导数 不 依赖 其 求 
导数 的 次 序 ， 而 只 依赖 于 对 每 一 个 变 元 求 导数 的 次 数 ， 因 此 ， 每 一 个 变 元 对 应 于 一 


个 傅 ， 所 以 不 同 的 + 阶 偏 导 数 共有 (” ”“) 个 ， 一 个 三 元 函数 的 4 阶 偏 导数 共有 15 


个 ，5 阶 偏 导数 共有 21 个 . > 

考 虚 n 个 固定 的 满足 方程 式 6. D 的 整数 ， 把 > 个 球 置 于 ”个 盒 中 的 放 法 的 数 

日 ， 归 结 为 定理 4. 2 中 所 给 出 的 占 位 数 nor, BEER n 种 放 法 都 是 等 可 能 的 
EAR ERE WM riser, 的 概率 为 

r! _ 


这 类 概率 分 配 在 前 已 提 及 的 全 部 应 用 中 都 用 到 过 ， 并 用 作 随 机 性 的 直观 概念 的 
国有 的 基础 ， 没 有 其 他 的 分 配 被 建议 作为 概率 的 或 直观 的 基础 ， 足 以 见 它 在 方法 论 
上 的 重要 性 ， 经 验 驱 使 物理 学 家 用 其 他 的 分 布 来 代替 分 布 (5.3)， 而 这 给 直观 带 来 


(5. 3) 


1. r=100, n=4 的 特例 在 第 1.2 节 例 Ce) 中 应 用 过 . 


“2.5 在 占 位 问题 中 的 应 用 31 


了 冲击 这 将 在 下 半 节 中 讨论 . (在 物理 学 中 ,, 称 6.3) 为 麦克 斯 韦 - 玻 耳 兹 曼 分 布 ). 

多 种 需要 要 求 我 们 进而 考虑 盒 是 不 可 辩 的 ， 这 导致 上 右 位 数 中 的 次 序 是 不 可 区 分 的 . 下 面 
的 例子 将 提供 一 个 解决 此 类 问题 的 常规 的 方法 . 

Bl (c) 把 r= 二?7 BRIA nr=] 个 使 中 的 形式 ( 盒 可 以 理解 为 一 周 的 7 天 ， 球 可 以 理解 为 
呼唤 、 信 件 、 意 外 的 事件 等 等 )， 为 了 简洁 起 匈 ， 让 我 们 考虑 一 个 以 任意 次 序 出 现 的 占 位 数 为 
2,2,1,1,1,0,0 的 分 布 ， 这 7 个 占 位 数 把 7 个 盒 分 为 三 个 子 类 ， 它 们 分 别 为 有 两 个 盒 两 次 地 被 
占 位 ， 三 个 盒 被 占 位 一 次 ， 两 个 空 着 的 盒 . 这样 把 它们 分 为 三 群 其 大 小 各 为 2,3,2 的 分 法 共 
有 了 7! 一 (21。3!1。21) 种 ， 而 对 每 一 种 给 定 的 分 法 ， 把 7 个 球 放 入 这 7 个 盒 中 的 方法 共有 7! 二 
(21。21.。1!1。1!1。11。01。01) 一 71 一 (21。21) 个 不 同 的 分 布 ， 所 以 用 某 种 次 序 出 现 的 占 位 数 
为 2,2,1,1,1,0,0 的 不 同 的 分 布 共 有 


7 7! 
Dp. 3t 21 ate al: (9. 4) 


以 后 将 会 指出 ;此 结果 可 以 通过 两 次 应 用 (4.7) 式 而 导出 ， 即 是 既 对 球 又 对 盒 . 同样 的 
结果 可 以 用 许多 方法 推出 而 且 也 可 以 写成 多 种 形式 ， 但 是 此 处 的 方法 对 多 类 问题 提供 了 一 个 
最 简单 的 常规 技巧 ，( 参 见 第 10 节 习 题 43 一 45) 表 2-1 包含 了 类 似 于 6.4 的 数据 ， 包 含 了 
当 n=r=7 时 占 位 数 的 全 部 可 能 的 结构 的 概率 . > 


表 2-1 7 个 球 放 入 7 个 盒 中 的 随机 分 布 


占 位 数 排列 数 等 于 7!X71 除 以 概率 〈 排 列 数 除 以 7 ) 


1,1,1,1,1,1,1 71X1! 0. 006 120 
2,1,1,1,1,],0 51X2! 0. 128 518 
2,25151,1,0,0 213121 X2121 0.321 295 
2,2.2,1,0,0,0 313!1 X212121 0. 107 098 
3,1,1,1,1,0,9 4121 x3! 0. 107 098 
3+2+141,0,0,0 2131X312! 0.214 197 
35252,0,0,0,0 214) X312121 0.026 775 
3535,1,0,0,0,0 2141 X3131 0. 017 850 
4,1,1,1,0,0,0 3131 x4! 0.035 699 
4,2,1,0,9,0,0 41X412! 0. 026 775 
4,3,0,0,0,0,0 51X413! 0. 001 785 
9,1,1,0,0,0,0 214! xo! 0. 005 355 
5,2,0,0,0,0,0 DXDT! 0. 001 071 
6,1,0,0,0,0,0 of x6! 0. 000 357 
7,9,0,0,0,0,0 61 X71 0. 000 008 


1. 波 司 - 爱 因 斯 坦 和 费 米 - 狱 拉 克 统 计 


考虑 一 个 力学 系统 ， 它 具有 个 不 能 分 辨 的 质点 .在 统计 力学 中 ， 第 第 把 相 空间 
分 成 n 个 小 区 域 GREE), n 是 很 大 的 ， 因 此 ， 每 一 个 质点 总 处 于 茶 一 个 盒 中 .用 
这 种 方法 ， 整 个 系统 的 情况 以 7 个 质点 放 和 人 个 盒 的 随机 分 布 来 描述 ， 千 一 看 来 ， 似 
乎 〈 至 少 对 ”个 盒 适 当 的 定义 ) 全 部 w 个 排列 都 具有 相同 的 概率 ， 如 有 果 这 年 对 的 ， 
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那么 ， 物 理学 家 把 它 叫 作 麦 克 斯 书 -~ 玻 耳 效 曼 统计 《这 里 所 用 的 “统计 ”一 词 是 物理 
中 的 术语 )， 人 大 们 曾经 花费 过 很 多 精力 要 想 证 明 物 理 质 点 是 按照 麦克 斯 韦 - 玻 耳 效 曼 
的 统计 法 则 行动 的 ， 但 是 现代 理论 无 可 置疑 地 表明 ， 这 个 统计 法 则 对 于 目前 所 知 的 
任何 质点 都 是 不 选用 的 .在 任何 情形 下 ， 那 种 排列 的 概率 都 不 是 近乎 相等 的 ， 于 
是 ， 人 们 另外 引进 两 个 概率 模型 ， 这 两 个 概率 模型 分 别 能 够 满意 地 描述 某 一 类 型 的 
质点 的 动态 ， 应 用 的 时 候 ， 哪 个 成 功 就 用 哪个 .两 个 模型 都 不 是 放 之 四 海 而 普 准 的 . 
说 不 定 有 一 天 ， 对 于 某 些 种 类 的 质点 人 们 还 会 引进 第 三 类 新 模型 . 

必须 记 住 ， 现 在 我 们 只 讨论 那些 不 可 分 辨 的 质点 ， 有 7r 个 质点 和 SB. Paw 
司 - 爱 因 斯 坦 统 计 ， 就 是 只 考虑 那些 可 区 分 的 排列 ， 而 每 个 排列 都 赋 以 相等 的 概率 
1/A,,， 此 处 A,, 由 GD 所 定义 . 在 统计 力学 中 ， 已 经 证 明 这 个 假设 对 于 含有 偶数 
个 基本 质点 的 光子 、 核 子 和 原子 都 是 正确 的 -为 了 描述 另外 一 些 质点 的 情况 ， 我 
们 要 引进 第 三 种 赋 概 的 方法 ， 上 费 米 - 狄 拉克 统计 是 基于 这 些 假设 (1) 2 个 或 多 个 质 
点 在 同一 个 盒 中 是 不 可 能 的 ; (2) 满足 上 一 个 条 件 的 所 有 的 可 区 分 的 排列 具有 相同 
的 概率 ， 这 里 第 一 个 假定 要 求 r<n. 每 一 种 排列 都 相当 于 2 个 盒 中 某 - 个 各 含 一 个 
质点 ， 也 就 是 说 ， 每 一 种 安排 相当 于 从 nn 个 盒 中 选取 x 个 ， 因 此， 在 费 米 - 犹 拉克 统 


te. AÒ OARRA Balai"). RMI AT DLE 


电子 、 中 子 和 质子 上 ， 这 个 富有 教育 性 的 实例 告诉 我 们 ， 光 和 凭 先 验 的 论证 来 选择 或 
判明 概率 模型 是 行 不 通 的 ， 事实 上， 没有 任何 的 抽象 推理 可 以 说 明 为 什么 光 了 于 和 质 
子 并 不 遵从 同一 个 概率 规律 (麦克斯韦 - 玻 耳 兹 曼 统 计 和 波 司 - 爱 因 斯 坦 统计 之 则 的 
基本 区 别 将 在 第 11 节 习 题 14 一 19 中 国明 ). 

RA: 在 麦克 斯 书 - 玻 耳 兹 曼 统 计 中 ， 盒 1,2,… rn PMS nner, BR EFT 
netr =r) 的 概率 由 (5.3) 式 所 给 出 ; 在 波 司 - 爱 因 斯 坦 统计 中 ， 这 个 概率 是 


| 
1/A,; TATE RR-A LEA F 这 个 概率 等 于 (”) ， 其 中 每 一 个 7; 都 为 0 或 为 1. 


例 (a) 邻 n==5,r 二 3， 按 照 麦 克 斯 韦 - 玻 耳 兹 曼 ， 波 司 - 爱 因 斯 坦 ， 费 米 - 犹 拉 殉 


三 种 不 同 的 统计 法 则 ， 排 列 ( x | 一 | x | * | 一 ) 分 别 具 有 概率 5 R CTIS 


见 第 1.6 节 例 Cb). 

(b) 印 刷 错 误 ， 一 本 书 中 包含 了 7 个 符号 〈 字 母 )， 其 中 -个 是 印 错 的 .错字 的 分 
布 对 应 于 r 个 球 放 入 7 个 盒 的 分 布 (每 一 个 盒 最 多 有 一 个 球 )， 因 此 ， 有 理由 假定 : 
印刷 错误 遵从 费 米 - 狄 拉克 统计 (参见 2. 10 证 习题 38). > 


2. 应 用 到 连贯 中 去 


在 任 一 由 两 类 元 素 构 成 的 有 序 序列 中 ,由 同一 类 元 素 所 组 成 的 最 大 的 子 序列 称 为 一 个 
连贯， 例如 ， 在 序列 aaaBaaB888a 中 ， 开 始 时 ， 有 长 度 为 3 的 一 个 -连贯 ， 其 后 有 4 个 
ER , 长 度 依 次 为 1,2,3,1.a- 连 贯 和 88- 连贯 是 相间 有 的， 由 此 ， 连贯 的 个 数 总 是 等 于 
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异类 相 邻 的 总 次 数 加 1. 

应 用 的 例子 . 连贯 理论 可 以 有 很 多 方式 应 用 到 统计 中 去 ， 不 过 ， 其 主要 还 是 用 
于 联系 随机 性 检验 和 齐 次 性 检验 . 

(a) 在 随机 性 检验 中 ， 问 题 是 要 判断 一 次 给 定 的 观察 是 不 是 随机 的 ， 或 者 是 不 
是 有 系统 的 因素 在 起 作用 .一 个 简单 的 例子 … ， 我 们 假定 一 个 人 观察 餐桌 用 坐 情况 . 
他 用 王 表 示 空 座 ，O 表示 被 占 座 ， 给 出 了 如 下 的 一 个 记录 : EOEEOEEEOEEECO- 
EOE， 值 得 注意 的 是 ， 没 有 2 个 被 占 座位 是 相 邻 的 ， 这 可 能 是 偶然 的 吗 ? 因为 对 于 5 
个 被 占 座位 和 11 个 空 座 而 言 ， 连 贯 的 个 数 不 可 能 多 于 11 个 ， 而 这 个 记录 恰巧 就 是 有 
11 个 连贯 的 极端 情形 ， 以 后 ， 我 们 会 指出 ， 如 果 所 有 的 排列 都 是 等 概 的 话 ， 出 现 11 
个 连贯 的 概率 只 有 0.0578. 这 个 小 概率 在 某 种 程度 上 符合 了 这 种 预感 ， 那 就 是 : 
所 观察 到 的 那 种 分 离 现 象 是 有 意 的 .这样 的 怀疑 虽然 不 能 用 统计 的 法 则 加 以 证 明 ， 
但 是 如 果 继 续 观 察 下 去 ， 就 可 以 收集 到 更 多 的 证 据 ， 如 果 答 厅 常 常 有 家 妖 顾 客 用 和 餐 ， 
那么 将 会 有 成 群 地 集中 池 领 座位 的 倾向 ， 因 而 会 出 现 个 数 〈 相 对 地 ) 较 少 的 连贯 ， 
同样 ， 如 果 把 教室 里 男生 和 女生 的 连贯 计算 一 下 ， 也 许 就 可 以 发 党 他 们 混合 的 情况 
不 是 随机 的 ， 难 得 出 现 的 排列 竟然 出 现 ， 可 以 给 出 一 些 线索 去 寻求 系统 原因 : 连贯 
的 数目 过 多 就 表示 人 为 的 故意 混合 ; 连贯 个 数 太 少 表 示人 为 的 故意 集结 ， 当然 ， 这 
些 结论 并 不 是 很 可 靠 ， 但 是 ， 有 效 的 统计 技巧 已 经 大 大 地 发 展 了 ， 它 在 实践 中 大 大 
地 缩小 了 作出 错误 结论 的 危险 性 . 

休 哈 特 把 连贯 理论 应 用 于 工业 上 的 质量 控制 中 ， 当 橡皮 垫圈 制 成 之 后 ， 其 厚度 
各 不 相同 ， 厚 垫圈 的 长 串 (长 连贯 ) 的 出 现 ， 可 能 反映 生产 过 程 不 够 完善 ， 由 此 引 
导 我 们 去 消除 不 完善 的 原因 ， 这 样 就 能 防止 即将 到 来 的 毛病 ， 而 使 得 产品 达到 高 度 
的 均匀 性 . 

在 生物 的 现场 实验 中 ， 我 们 计算 健壮 作物 和 有 病 作物 的 连贯 ， 有 病 作物 的 长 连 
贯 提 示 疾 病 的 蕊 延 ， 气 象 学 家 留心 干燥 和 潮湿 月 份 的 连续 现象 ,借以 发 现 气 候 的 
持续 现象 的 线索 ， 

(b) 为 了 了 解 典 型 的 齐 次 性 问题 ， 我 们 假定 两 种 药 给 两 组 病人 服用 ， 或 者 说 我 
们 想 比 较 两 种 处 理 (医药 上 的 、 农 业 上 的 或 工业 上 的 ) 的 效果 . 在 实践 中 ， 我 们 有 
两 组 观察 结果 ， 辟 如 说 wm oz ，…as 和 有 ,有 ,有 分 别 对 应 于 两 种 处 理 或 者 说 分 别 对 
应 于 两 个 总 体 中 的 元 素 的 某 一 特性 (例如 重量 )， a 和 8 都 是 数 ， 我 们 假定 它 按 大 小 
KFH: aKa Sa: B 志 妨 志 … 志 妨 。， 我 们 把 这 两 组 数 合 在 一 起 ， 并 按 大 小 次 
序 来 排列 ， 一 个 极端 的 情况 是 全 部 a 都 在 全 部 8 前面， 这 种 现象 可 以 用 来 指出 这 两 种 
处 理 或 这 两 个 总 体 之 间 有 差异 . 另 一 方面 ， 如 果 两 种 处 理 都 是 一 样 的 ， 则 a 和 8 或 多 
或 少 以 随机 次 序 出 现 ， 沃 尔 德 CA. Wald) 和 沃 尔 福 威 茨 0 曾经 证 明了 : 连贯 理论 常 
党 能 很 方便 地 用 来 发 现 微 小 的 系统 误差 (一 个 用 不 同 的 方法 处 理 的 例子 见于 第 3. 1 
节 例 (b)). > 

许多 关于 连贯 的 问题 都 可 以 用 一 种 极 简单 的 办 法 解决 ， 给 定 a 个 不 可 区 分 的 a 和 
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5 个 不 可 区 分 的 6， 则 有 ({ “，“)} 个 可 以 区 分 的 次 序 ， 如 果 有 六 个 e- 连 贯 ， 则 P- ER 


的 个 数 或 者 为 m+, REA ml, REA m. .把 a 个 a 安排 在 nn 个 连贯 中 等 价 于 
把 它们 安排 到 m 个 盒 中 去 ,它们 中 间 没 有 一 个 是 空 的 ， 由 最 后 一 个 引 理 得 知 : 这 种 


安排 法 共有 (“| ) 种 ， 由 此 推出 ， 具 及 个 a- 连 黄 ，nm 十 1 个 8- 连贯 的 排列 共有 


(SC; ， (在 第 11 节 问 题 20 一 25 中 还 要 继续 )， 
(c) 在 物理 学 中 ， 用 连贯 理论 来 研究 合作 现象 ， 在 伊 辛 〈Ising) 的 一 维 点 阵 理论 
中 ， 能 量 依赖 于 “异类 相 邻 阵 点 ”的 总 数 ， 也 就 是 说 依赖 于 连贯 的 个 数 . > 


2.6 超 儿 何 分 布 


n=n—n, 个 是 黑 的 ， 任 意 选 取 > 个 元 素 组 成 一 组 ， 试 求 所 取出 的 这 一 组 中 ， 恰 有 k 
个 红 元 素 的 概率 go,， 这 里 , k ER, CHP EEM 0 到 min (r,a). 
为 了 求 出 9g,， 我 们 注意 到 ， 选 取 的 这 组 中 ， 包 含 着 个 红 元 素 和 vr 一 个 黑 元 素 . 
红 元 素 的 选取 有 (种 不 同方 式 ， 而 黑 元 素 有 (”_。 ) 种 方式 ， 由 于 个 红 元 素 的 任 
音 一 种 选 法 都 可 以 和 黑 元 素 的 任意 一 种 选 法 配合 ， 所 以 我 们 得 到 
ICa) 
me (6.1) 
如 此 定义 的 这 一 组 概率 ， 就 称 为 超 几 何 分 布 : 利用 (4.3) 式 ， 可 以 把 (6.1) 写成 
r nr 
,Wy (6. 2) 
(2 ) 
注 ”概率 g, 只 有 在 的 数值 不 超过 > Rn 有 定义 ， 虽 然 如 此 ,但 从 定义 《4.1) 
可 以 推出 : 4 b>a m (?)=0. Pk, 4 km 或 >>r 时 ，(6.1) 和 (6.2) 式 都 给 


Hig,=0. FE, (6.1) 和 (6.2) 的 定义 对 所 有 的 & 之 0 都 可 以 应 用 ， 只 要 把 关系 
gq; 二 0 的 出 现 解 释 为 其 所 对 应 的 事件 是 不 可 能 事件 束 成 了 . 

例 (a) 质 量 检 查 ， 在 工业 的 质量 控制 中 ， 产 品 分 批 进行 抽样 检查 ， 每 批 由 7 什 

产品 组 成 ， 在 一 批 中 ， 次 品 就 以 “ 红 ” 元 素 代表 之 。， 当然， 它们 的 数目 m ERRIN. 


L 这 个 名 字 可 由 以 下 事实 来 作 解释 ，{9,} 的 母 函 数 参 阅 第 11 章 ) 可 以 用 超 几 何况 数 来 表示 . 
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在 取出 的 大 小 为 7 的 一 个 样本 中 ， 次 品 的 个 数 & 是 完全 确定 的 . 于 是 ，(6. 1) 式 可 以 
使 我 们 对 m 的 值 作出 似 然 的 估计 . 这 是 一 个 典型 的 统计 估 值 的 问题 ， 但 它 已 超出 了 
本 书 的 范围 . 

(b) 在 2.4 节 例 (bh) P, H n=10 位 参议 员 组 成 总 体 ， 有 n= 二 2 位 是 指定 的 那个 州 
( 即 “ 红 ”的 ) 的 参议 员 ， 任 意 选 取 一 50 位 为 一 组 ， 其 中 来 自 指定 的 那个 州 的 代表 可 以 
有 k==0,1 或 2 位 从 6.2) R 我 们 可 以 得 到 { 记 住 由 (4.4) 式 给 出 的 (0)=1) 

_ _ 50+ 49 
Go 和 100 © 99 
50 
41°99 

2.45] (bh) 中 也 得 到 过 g 的 值 ， 但 是 方法 不 同 . 

(c) 用 标记 后 再 捕 记 录 来 估计 一 群 动物 的 总 数 !， 假 设 从 某 一 个 湖 里 ， 提 出 1000 Æ 
鱼 ， 涂 以 红 点 后 放 回 ， 隔 了 一 段 时 间 以 后 ， 重 新 又 捉 出 1000 尾 鱼 ， 发 现 其 中 有 100 尾 
涂 有 红 点 的 鱼 ， 根 据 这 些 情况 ， 对 该 湖 中 鱼 的 总 数 能 作出 什么 绪论 呢 ? 这 是 统计 估 值 
的 一 个 典型 问题 ， 如 要 叙述 近代 统计 中 用 到 的 各 种 方法 ， 未 免 离 题 太 远 ， 现在 我 们 只 
想 说 明 一 下 ， 超 几何 分 布 是 怎样 提供 给 我 们 线索 来 解决 问题 的 我们 自然 要 假定 ， 这 
两 次 捕 扣 都 考虑 为 从 湖 中 所 有 的 鱼 组 成 的 总 体 中 所 作 的 随机 抽样 . 〈 实 际 上 ， 这 个 假设 
排斥 了 下 面 两 种 情况 ， 两 次 捕捉 都 在 某 一 个 局 部 的 区 域 进 行 ， 两 次 捕 换 之 间 相 隔 的 时 
AAG.) 我 们 还 假定 ， 在 两 次 捕捉 期 间 ， 湖 中 鱼 的 总 数 是 一 个 常数 . 

为 使 间 题 一 般 化 ， 我 们 考虑 任意 大 小 的 样本 ， 令 

n 二 湖 中 鱼 的 总 数 〈 未 知 的 ); 

nl 一 第 一 次 提出 的 鱼 数 ， 它 们 对 应 “ 红 球 ”; 

r 二 第 二 次 捉 出 的 鱼 数 ; 

k 三 第 二 次 捉 出 的 鱼 中 有 红 点 的 鱼 的 总 数 ; 
gq,(n) 三 第 二 次 捉 出 的 鱼 中 恰 有 上 & 尾 有 红 点 的 鱼 的 概率 . 

这 样 一 来 ， 我 们 马上 看 出 ，g, MEH (6.1) BAW. Riek. mor 和 是 可 以 
观察 到 的 ， 而 n 是 未 知 的 ， 注 意 ， 顺 便 再 提 一 下 ，n 是 一 个 定数 ， 它 不 是 随机 遇 和 而 改 
恋 的 ， 我 们 知道 ， 曾 经 有 mtr ETARA., Am n>n trok 这 就 是 
预先 可 以 作出 肯定 判断 的 全 部 .在 我 们 的 例子 里 ，n =r =1000,k=100, AAR 
有 1900 尾 鱼 的 假定 是 可 以 考虑 的 ， 但 是 如 果 从 这 个 假定 出 发 ， 导 出 来 的 结论 是 : & 
牛 的 事件 的 概率 小 得 惊人 ， 事 实 上 ， 大 小 为 1000 的 两 次 样本 ， 取 尽 了 整个 总 体 中 的 
1900 尾 鱼 ， 其 概率 由 〈6. 1) AYALA 


一 0. 247 47+, 


=0. 905 Qores, 


1. 这 个 例子 在 第 一 版 中 就 采用 了 ， 但 是 当然 我 不 知道 这 个 方法 在 实际 里 已 经 广泛 采用 . 关于 这 方面 的 新 
的 贡献 请 参见 文献 N. T. J. Bailey [14] 和 了 TD G. Chapman [15]. 
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(1000) (200) (1900) = (1000! )? 
100 /\ 9007 \1000 1001 1900!" 


由 斯 特 林 公式 〈 参 见 第 2. 9 45) 可 以 证 明 ， 这 个 概率 的 数量 级 将 是 10 9 钮 . 因此 可 以 
认为 ， 我 们 的 假定 不 合理 应 予以 否定 ， 同 理 可 知 ，n 很 大 〈 辟 如 说 1 000 000) 的 假 
定 也 一 样 会 被 否定 的 ， 经 过 这 样 的 考虑 ， 迫 使 我 们 去 寻求 使 g,(n) 达 到 最 大 值 的 那个 
， 因 为 那个 ”能 使 我 们 的 观察 有 着 最 大 的 概率 ， 对 任意 一 组 特定 的 观察 值 mm rk, E 
a, (nn) 达到 最 大 值 的 那个 x 就 记 作 有 ， 并 称 为 n 的 最 大 似 然 值 ， 这 个 概念 是 由 费 希 泵 
(R. A. Fisher) 所 引进 的 .为 了 找 出 4%， 考 虑 比值 


gq, (n) — (n—n;,)(n—-r) 
qg, (n—1) (n-m rtk)n' 


由 简单 的 计算 可 知 ， 这 个 比值 大 于 或 小 于 1， 对 应 于 nk <nmr E nk>nr 这 就 是 说 ， 
当 n 增 大 时 ， 序列 gq,《n) 先 是 上 升 而 后 下 降 . 当 n 为 小 于 nı r/k 的 最 大 整数 时 ， 它 达 到 
最 大 值 ， 因 此 半天 约 等 于 nyr/&， 在 我 们 这 个 例子 里 ， 鱼 数 的 最 大 似 然 值 为 4 二 10 000. 

n 的 真 值 可 能 大 些 或 者 小 些 ， 我 们 可 以 找 出 这 样 一 个 范围 ， 使 得 我 们 可 以 合理 地 
HA n 落 在 这 个 范围 之 内 ， 为 此 ， 让 我 们 来 检验 n 小 于 8500 的 这 个 假设 ， 把 = 
8500,n =r=1000 代入 (6. 1) 而 进行 计算 ， 在 第 二 次 样本 中 含有 100 尾 或 较 少 的 红 
点 鱼 的 概率 ， 这 概率 为 zx 一 % 十 和 十 … 十 go。， 直 接 计算 这 个 二 是 很 麻烦 的 ， 如 用 第 7 
章 的 正 态 近似 法 ， 就 可 以 很 容易 求 出 zx<z*0.04.， 同样 ， 设 "一 12 000， 则 在 第 二 次 的 
样本 中 含有 100 尾 或 较 多 红 点 鱼 的 概率 约 为 0.03， 根据 这 些 数字 ， 可 以 推 想 鱼 的 其 
正 条 数 半 大 约 处 在 8 500 与 12 000 之 间 . 还 有 其 他 的 方法 来 推导 这 些 结论 和 进行 佑 
值 ， 但 是 我 们 在 这 里 就 不 细 讲 了 . | > 

由 概率 g, 的 定义 ， 可 得 gy 十 qi 十 gy 十 … 二 1 A, IERES n, m Mr, 
(6.2) WWA | 


(5) oe ")+ (1) M eet (a, ) (" 0 ")= M ): (6. 4) 
这 个 等 式 是 常用 的 ， 对 于 正 整 数 n 和 r 来 说 ,我 们 已 经 把 它 证 明了 ， 但 它 的 成 立 并 不 
受 这 个 限制 ， 实 际 上 ， 当 nn 和 7 为 任意 正 、 负 整数 时 ，(6.4) 都 成 立 a 必须 是 正 整 
数 ， 否 则 没有 意义 ). (两 个 证 明 的 提示 在 第 12 节 问 题 8,9 中 给 出 . ) 

很 容易 把 超 几 何 分 布 推广 到 大 小 为 n 的 总 体 中 含有 好 几 类 元 素 的 情况 ， 例 如 ， 
假设 总 体 中 含有 三 类 元 素 ， 其 个 数 分 别 为 ni ，n。 和 7 一 一 mn。 如 果 取 出 一 个 大 小 为 
; 的 样本 ， 那 么 ， 这 样本 含有 个 第 一 类 元 素 ，k; 个 第 二 类 元 素 和 r 一 一 & 个 第 三 
类 的 概率 为 (与 (6. 1) 相似 ) 

OWED 6D 

当然 ， 必须 要 有 kı Sn ,ks 二 nn 和 r—ky ki Snn 一 71， 

Gil 〈d) 桥 牌 . 52 张 牌 的 总 体 包含 4 个 类 ， 每 类 由 13 个 元 素 组 成 ,任意 发 到 一 


(6. 3) 
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家 的 13 张 牌 含有 5 GARDE. 4 张 红 心 ，3 张 方块 和 1 张 梅 花 的 概率 为 
DGG) > 
2.7 SE f AY E AY Bl 


在 这 一 节 里 ， 为 了 考虑 一 些 新 型 的 样本 空间 ， 我 们 将 避 开 组 合 分 析 的 百 接 思路 ， 
把 占 位 问题 稍 许 变化 一 下 .我 们 再 一 次 地 考虑 把 球 随 机 地 放 人 了 个 盒 这 个 概念 化 了 
的 “试验 ”” 然而， 这 时 我 们 事先 并 不 固定 球 的 个 数 "， 而 是 让 球 一 个 接 一 个 地 投入 
小 盒 ， 一 直到 我 们 指定 的 结果 出 现 为 止 ， 我 们 将 要 仔细 考虑 下 面 两 种 可 能 的 结 采 : 
(1) 球 一 个 接 一 个 地 往 盒 里 随机 地 放 ， 一 直到 有 一 个 球 放 入 某 一 个 已 经 有 球 的 盒 为 
止 ， 这 个 过 程 一 直 进 行 到 第 一 次 出 现 这 种 模式 才 结 束 ，〈ii) 我 们 固定 一 个 使 〈 壁 如 
说 ， 第 一 个 盒 ) ， 当 这 周 定 的 盒 还 空 时 ， 我 们 就 持续 地 随机 地 放 小 球 入 盒 ， 也 束 是 说 
当 这 个 盒 一 旦 放 人 球 时 ， 这 个 过 程 就 停止 . 

只 要 把 这 个 模型 稍 许 解释 一 下 就 会 说 明 问 题 ， 

S| (a) 生 日 。 在 2.3 节 例 (d) 中 ， 一 年 中 n=365 天 对 应 为 365 个 盒 ， 人 对 应 为 
球 ， 我 们 的 模型 (D) 现 在 可 以 这 样 说 : 如 果 我 们 一 个 接 一 个 地 随机 地 选 人 ， 问 需要 选 
取 多 少 次 才能 发 现 有 两 个 人 为 同一 天 生日 ? 模型 GD 轮 到 我 的 生日 在 样本 中 出 现时 
需要 选取 多 少 人 . 

(b) 钥 是 问题 ， 一 个 人 想 打 开 他 的 门 ， 他 有 把 钥匙 ,但 是 只 有 一 把 能 打开 他 的 
门 ， 由 于 事先 不 知 是 哪 一 把 ， 他 随机 地 用 这 些 钥匙 去 试 开 ， 因 此 ， 每 一 把 钥匙 在 每 
一 次 试验 中 被 抽 到 的 概率 都 是 mn !， 而 且 含 有 同样 多 的 试验 次 数 的 全 部 可 能 结 来 部 是 
相似 的 ， 这 个 人 恰巧 在 第 r 次 试验 把 门 打开 的 概率 是 多 少 ? 这 是 模型 GD 的 一 个 特 
别 情 形 ， 把 这 种 做 法 与 2. 10 节 中 习题 11 的 更 系统 的 探讨 比较 一 下 是 很 有 趣 的 ， 也 可 
参见 5.8 节 习 题 5. 

(co) 在 前 面 的 例子 中 ， 我 们 可 以 用 从 任意 的 总 体 中 抽样 来 代替 从 钥匙 中 抽样 ， 艾 
如 说 ， 我 们 可 以 用 收集 赠 券 来 代替 抽取 钥匙 ， 我 们 再 问 : 我 们 指望 什么 时 候 出 现 第 
一 次 重复 ， 何 时 出 现 预先 指定 的 元 素 . 

(dat fh to. EB 1.5 节 例 a 中 ， 一 个 硬币 一 直 扔 到 出 现 正面 为 止 ， 这 征 
模型 Gi) 4n=2 的 一 个 特殊 情况 掷 一 颗 山 子 ， 直 到 第 一 次 出 现 么 点 为 止 ， 这 也 
是 模型 GD 24 n=6 的 一 个 特例 (在 2. 10 节 习 题 21,22,36，2. 11 节 习 题 12 还 考虑 
了 其 他 的 一 些 等 待 时 加 ). > 

我 们 首先 讨论 概念 化 的 简单 的 模型 〈iD)， 为 了 方便 起 见 ， 我 们 利用 符号 Gis 
7 表示 第 1, 第 2409 ,第 r 个 球 放 入 第 jj » 72 7 个 盒 ， 而 且 过 程 在 第 r 步 
结束 . 这 就 意味 着 J: 都 是 ] 到 | n 之 间 的 整数 ， 此 外 六 8647, 1 都 是 不 相同 的 ， 但 7. 等 
Fiji ,中 的 某 一 个 .每 一 个 这 样 的 排列 都 代表 一 个 样本 点 .因为 第 一 次 出 现 茶 
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一 个 盒 已 经 放 了 球 的 情况 不 可 能 发 生 在 第 二 次 放 球 以 前 ， 也 不 可 能 发 生 在 第 * 十 1 次 
放 球 以 后 ， 所 以 ，r 只 可 能 取 2,3,…,n 十 1 中 的 某 一 个 值 . 现在 的 问题 和 过 去 老 的 模 
型 〈( 把 固定 数目 的 球 放 人 ?2 个 盒 中 ) 之 间 的 联系 使 得 我 们 对 每 一 个 恰巧 包 售 ~ 个 球 的 
样本 点 Gotoj) RUX n”. 我们 将 要 证 明 : 这 种 做 法 是 允许 的 〈 即 是 这 些 概 
率 加 起 来 等 于 1)， 而 且 它 可 以 推出 许多 合理 的 结果 . 

对 于 一 个 固定 的 +， 全 部 形 如 (ji ,…,j,) 的 样本 点 的 总 和 代表 事件 “过 程 在 第 
步 结 束 ” Mj LWA), | 种 不 同 的 选取 法 ， 而 j REER 7. ,I 一 :这 rr 一 1 
个 数 中 的 一 个 ， 由 此 推出 ， 过 程 在 第 r 步 结束 的 概率 为 

7 =o -D = (1-4)... (1-7-4) .7 一 上 ， (7. 1) 


n n 


其 中 0 一 0,9 一 一 . 过 程 在 第 r 步 以 后 结束 的 概率 p-=l1— Care Ti tqa, ) 5 BP 


pi=l, 
p= (11) (1), a2 


ESA UAA. ae, pa 二 0 M gq teta 1l 是 显然 的 .此 外 ， 当 
n 二 365 上 时， 公式 (7.2) 可 推出 (3.2). 一 般 地 ， 我们 的 新 模型 可 以 得 出 前 面包 含 固 
定 个 数 的 球 的 模型 的 同样 的 结果 . 

模型 G) 与 模型 O 之 不 同 点 在 于 模型 Gi) 要 依赖 一 个 无 穷 的 样本 空间 .于 
列 (jj ,…,j,〉 现 在 都 满足 下 述 条 件 : joroj 1 都 不 等 于 给 定 的 数 axn, M j, 二 a. 
此 外 ， 没 有 充分 的 理由 说 明 过 程 为 什么 总 要 结束 ， 对 于 一 个 固定 的 r+， 我 们 可 对 每 一 


个 形 如 Ji stts], 的 样本 点 ， 都 赋 以 概率 | 中 每 一 个 都 有 n—i 种 不 
同 的 选 法 ， 而 j, 的 选 法 只 有 一 种 ， 所 以 过 程 在 第 ~ 步 结 束 的 概率 为 
g= =, r= 1,250", (7.3) 


把 这 个 几何 级 数 加 起 来 ， 我 们 发 现 gf tol t= 1 BE, BRS AD l, HF 
以 ， 我 们 没有 必要 引进 代表 从 来 没有 一 个 球 放 人 给 定 的 盒 a 这 样 一 个 样本 点 .过 程 
在 第 r 步 以 后 才 结 来 的 概率 
pr =1—-Car 十 … 十 gq” ), 
因此 ， 我 们 有 
pr =(1—=), 一 2 (7. 4) 

这 是 我 们 所 期 望 的 

分 布 {p.) 的 中 位 数 定义 为 这 样 的 r: 它 使 二 十 … 十 Pr Sy. E ptet 


pp, 之 二 ， 大 致 可 以 这 样 理解 ， 过 程 在 中 位 数 以 后 还 继续 的 概率 和 在 中 位 数 以 前 结 
束 的 概率 差不多 (在 2. 3 节 例 (Cd)) 中 ， 中 位 数 为 "一 23)， 为 了 计算 中 位 数 ， 正 
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如 我 们 在 〈3.4) 中 所 作 的 一 样 ， 我 们 要 取 对 数 . 当 r 相 对 nn 来 说 较 小 时 ， 我 们 
看 出 一 log p, 差不多 等 于 二 /2n、 这 就 推出 { 加 } 的 中 位 数 大 致 上 等 于 nez. 


log 2) 主 ， 或 者 近似 地 为 三 地 ， 有 趣 的 是 ， 当 总 体 的 大 小 的 平方 根 增加 时 ， 其 中 位 
数 也 增加 .为 了 比较 ，(p;} 的 中 位 数 大 约 为 n， log 2， 或 0.7n， 它 对 nn 是 线性 地 


增加 . 在 模型 Cu) 中 , 等 待 时 间 超 过 的 概率 为 (1 一 n”)"， 或 者 近似 地 为 e = 
0. 36788117. 


2.8 二 项 式 系 数 


当 是 一 个 正 整数 时 ， 我 们 曾经 使 用 过 二 项 式 系数 ( … } ， 但 是 ， 可 以 很 方便 地 把 


它 的 定义 推广 .方程 (2. 1) 中 所 引进 的 数 (z),: 
(x), 一 TOZ 一 1)…(Z 一 r 十 ]) (8. 1) 
当 r 是 一 个 正 整 数 时 对 一 切实 数 并 都 有 定义. 当 r=0 Hf, 我 们 令 (x) 5l. 于 是 
(“= 
r rl r! 
对 全 部 实数 工 和 全 部 正 整 数 r 定义 为 二 项 式 系 数 ， 当 r= 二 0 时 ， 如 (4.4) 一 样 ， 令 


(5)=1 和 0! 二 1。 对 于 负 整 数 r， 我 们 定义 


(8. 2) 


(*\=0. (r<0), (8. 3) 


如 果 不 是 整数 时 ， 我 们 不 用 (”) 这 一 符号 . 
利用 这 个 定义 ， 我 们 很 容易 地 验证 


Hsc h sen. (8. 4) 
FTFEKZRIHZAREENEA. B—, STRAP ERK KU 
(7) =0 4 rn BR r<0. (8. 5) 
第 二 ， 对 每 一 个 x 和 每 一 个 正 数 r RU 
(AHG E) (8. 6) 


这 些 关系 都 可 以 由 定义 直接 验证 、 下 一 个 关系 的 证 明 在 一 些微 积分 教科 书 中 可 以 找 
到 | ， 对 于 任何 数 a 和 一 切 一 1<t<<1， 我 们 都 有 和 牛顿 二 项 式 公式 


a+or=1+($ h+ (3)e+ (5) tw (8.7) 
如 果 a 是 一 个 正 整数 ， 右 端 诸 项 中 次 数 高 于 e 的 项 都 为 0， 从 而 公式 对 一 切 上 都 成 
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Z. 如果 a PRERA, hme- TAAR 
应 用 (8.4)， 我 们 发 现 当 4 二 一 1 时 ， 展 式 (8.7) 化 为 几何 级 数 
lt 1 (8. 8) 


积分 〈8.8) ， 我 们 得 到 另外 一 个 公式 ， 它 在 以 后 是 很 有 用 的 ， 这 个 公式 就 是 自 
SK XY RL RRA 


bgd +) =e +oP atte I<, (8. 9) 
(8.9) 的 两 个 另外 的 形式 更 常用 ， 以 一 t 代 +， 我 们 得 到 
log Ht SP tS OTT te HII, (8. 10) 
把 最 后 这 两 个 公式 加 起 来 我 们 得 到 
+ log te +EH ,— I<. (8. 11) 


所 有 这 些 展 式 都 只 有 当 一 1<t<<1 时 才 成 立 . 
在 2.12 节 中 ， 将 要 从 (8.7) 推出 许多 有 用 的 关系 式 ， 这 里 我 们 只 注意 4 二 nn 十 
下 整数 且 令 :二 1 的 情形 时 ，(8.7) 推出 


y+) +S) e+) =z. (8. 12) 

这 个 公式 有 一 个 简单 的 组 合 解释 : 把 一 个 具有 了 个 元 素 的 总 体 分 为 两 群 ， 第 一 

群 的 元 素 个 数 可 以 为 k==0,1,…,n， 其 分 法 的 数目 等 于 这 个 公式 的 左边 ， 男 一 方面 ， 

这 样 一 种 分 法 可 以 直接 考虑 每 一 个 元 素 或 者 属于 第 一 群 或 者 属于 第 二 群 ， 其 分 法 等 
于 公式 的 右边 (类似 的 推理 可 以 证 明 ， 多 项 式 系 数 (4.7) 相 加 等 于 k). 


2.9 ”斯 特 林 公式 


分 析 概 率 论 的 一 个 重要 工具 蕴涵 在 下 述 著 名 的 定理 “中 : 
ERAT 
n! ~ Von te", (9.1) 
其 中 符号 一 表示 两 边 之 比 当 neon F 1. 

这 个 公式 是 非常 有 用 的 ， 因 为 它 有 很 大 的 理论 价值 ， 并 且 通 过 它 可 以 得 出 一 择 
精确 的 数值 估计 ， 确 实 ，(9. 1) 两 边 之 差 可 以 超过 任何 数 ， 但 是 其 百 分 误差 却 是 很 
小 的 ， 它 下 降 得 很 迅速 ， 其 至 当 n 很 小 时 ， 斯 特 林 双 近 都 很 精确 ， 事 实 上 ，(9.1) 的 
右边 以 0. 9221 AE 11 ， 以 1.919 来 通 近 21 ， 以 118. 019 来 逼近 51 =120. 其 百 分 
误差 分 别 为 8 中 ,4 中 ,2%%， 对 101 =3 628 800 来 说 ， 其 近似 值 为 3 598 600, RA 
误差 为 0.8%， 对 1001 来 说 ， 其 百 分 误 差 只 有 0.08%. 

斯 特 林 公式 的 证 明 ”我 们 首先 要 推出 下 式 的 几 类 估计 : 
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log n! =log 1+ log 2 十 … 十 log n. (9. 2) 
因为 logz Ær KIER. AL 
| logx dr <logk<| log x dx, (9, 3) 
| È 
ERX k M 1 Bi n 相 加 得 : 
"loge dr < log n! <| log x de (9. 4) 


或 者 
n log n—n<log n!<i(n+1])log(nt+l)~—n. (9.5) 
这 个 双重 不 等 式 提示 我 们 把 log n! 与 两 端的 数 的 算术 平均 来 做 比较 . XEF A Re fej BY 


HUB (nt—) log zx 一 az， 据 此 ， 我 们 估计 下 面 的 差 57 


d, = log n! = (nt log nn. (9. 6) 
注意 : 
d, =d, = (n+ log el. (9. 7) 
但 是 
1+ 
nvl_ anv) (9, 8) 
n 1 一 ] 
2n 十 1 
应 用 展 式 (8.11) 得 : 
| 1 o t8 CE ¢ 
dy Ani = Zant Ty! Ont (9. 9) 


E ERE 5A EA Cnt) RL AE eS 
1 ee 1 
30 (2n+1)?—-1] 12n 12(nt+1). 
由 (9.9) 得 知 {q,}) 是 下 降序 列 ， 而 (9.10) 说 明 序 列 {4, 一 (12n) !} 是 上 升 的 ， 因 此 
极限 


<d, — dp L (9. 10) 


lim d, =C (9. 11) 
存在 是 有 限 ， 但是， 由 (9. 6) WI: d, 一 C 等 价 于 
ni~e& e nt? ee”, (9.12) 


这 就 是 斯 特 林 公 式 ， 除 了 此 处 的 常数 C 尚未 确定 以 外 ，ec 二 V2x 将 在 第 7. 2 节 中 证 
BA. 证 明 是 初等 的 且 不 依赖 于 第 4 章 至 第 6 章 的 材料 ， 证 明 延 至 第 7 章 的 原因 是 它 与 
正 态 副 近 定 理 有 很 自然 的 联系 . 

精细 化 ， 不 等 式 (9.10) 有 一 个 反 向 的 伴随 不 等 式 ， 由 (9.9) 多 得 : 


l 


l 1 1 
dr di>acon tl) Intl 12+) +1’ (9, 13) 
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由 此 得 和 序列 (4 一 (li2n 十 1)”} 是 下 降 的 .而 (4 一 (12n) 一 } 是 上 升序 列 ， 所 以 可 得 双重 不 等 式 ; 


Ciri L= <d, <C+-- ， (9. 14) 
MEIRA (9.6) 并 注意 E= Anaig, 
Son n't en" 。e(12n 十 1) 一 1 <n! < In n'te —n. olan) (9. 15) 


此 双重 不 等 式 给 斯 特 林 公式 一 个 值得 注意 的 补充 ， 其 左 、 右 两 边 数 值 的 比 接近 于 
1—(12n? 7", Ale (9.1 右边 的 数 超过 n! 但 其 误差 小 于 9n“%. 实际 上 误差 非常 小 ， 对 
n=2,(9. 15) 右 方 给 出 值 2. 0007， 对 n=5,09. 15) 右 方 给 出 值 120. 01. 


2.10 “习题 和 例子 : 


注意 : 在 每 一 种 情形 都 假定 所 有 的 排列 具有 相同 的 概 牵 . 

1. 每 个 人 的 姓 都 是 一 个 英文 字母 ，(a) 名 恰 含 两 个 字母 ，(b) 名 含 至 多 两 个 字母 ，(c) BF 
至 多 三 个 字母 ， 试问 ab, (O 三 种 情况 各 构成 多 少 姓名 ? 

2 莫 尔 斯 电码 中 ， 善 通 的 字 是 以 “长 划 ” 和 “点 ”两 种 记号 容许 重复 使 用 来 表示 的 ， 问 不 
超过 10 个 记号 可 以 表示 的 字 有 和 多少 ? 

3. 每 块 多 米 诺 骨 牌 刻 上 2 个 数 ， 骨 牌 是 对 称 的 ， 所 以 同一 块 骨牌 上 的 数 对 是 设 有 次 序 的 
如 果 用 1,2,…,n 等 数 ， 问 能 刻 出 多 少 不 同 的 牌 来 ” 

4. 数 1,2,…,n 依 任意 顺序 排列 ， 试 求 数列 中 满足 下 列 条 件 的 概率 ，(a) 1 与 2 相继 出 现 ; 
(b) 1,2 和 3 相继 出 现 . 

5. 某 甲 掷 6 颗 货 子 至 少 出 现 ISAS. ROH 12 RPS eT AR. AN 
谁 万 的 概率 大 *? 
提示 : 计算 输 的 概率 . 

6. (a) 在 3 个 随机 数码 中 ， 一 个 数码 重复 发 生 1 次，2 次 或 3 次 的 概率 为 多 少 ? b) 对 4 个 
随机 数码 的 情形 ， 把 上 述 问题 再 做 一 过 . 

7. 试 求 在 ~ 个 随机 数码 的 样本 中 ， 没 有 两 个 数码 相同 的 概率 p,， 并 用 斯 特 林 公 式 ， 信 计 pro 
的 数值 . 

8. 在 & 个 随机 数码 中 下 列 事件 的 概率 是 多 少 ? a) 0 不 出 现 ; (b) 1 不 出 现 ; (c) 0 与 1 都 
不 出 现 ; (d 0 和 1 两 数 至 少 有 一 个 不 出 现 . SAAB 分 别 表示 事件 a) 和 CD), WH 
A 和 B 把 其 余 的 事件 也 表示 出 来 . 

9. n 个 球 随 机 放 人 7 个 盒 中 ， 问 恰 有 一 盒 空 着 的 概率 为 多 少 ? 

10， 某 停车 场 一 行 有 12 个 车 位 某 人 发 现 有 8 个 位 置 停 了 车 ， 而 有 4 个 接连 (构成 一 个 连贯 ) 
的 位 置 空 着 ， 这 种 发 现 令 人 惊奇 〈 是 非 随机 性 的 表示 ) 1? 

11。 某 人 有 7 个 钥匙 ， 其 中 只 有 一 把 能 开 开 他 的 门 ， 他 逐个 地 用 它们 去 试 开 (抽样 是 无 放 回 的 )， 


1. 本 节 及 2. 12 节 为 各 种 性 质 习题 和 问题 ， 以 及 课文 的 各 种 补充. 
2. CABS HOUR MRF 1963 年 写 信 询问 牛顿 ， 牛 顿 认 为 甲 获胜 的 概率 大 ， 经 推 项， 牛顿 推 
翻 了 该 结论 ， 但 未 能 说 服 佩 皮 斯 ， 可 参看 [L19]. 


12. 


13. 


14. 


15. 


16. 


17. 


18. 


19, 


20. 


21. 


22. 


23. 
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这 可 能 要 1 次 ，2 次 ， 甚 至 次 才能 把 门 开 开 . 证 明 这 ”种 不 同 的 结果 的 概率 都 是 1/m . 

假定 n 支 手 杖 的 每 一 支 都 折断 成 一 长 一 短 的 两 小 段 ， 把 这 27 个 小 段 任 意 排 成 对 ， 接 成 
n PAL. oR: Ca) 这 些小 段 刚好 接 成 原来 的 样子 的 概率 ; b 所 有 长 的 小 段 都 与 短 
的 小 段 配 对 的 概率 

统计 假设 的 检验 ， 康 奈 尔 大 学 某 教 授 得 到 了 12 张 夜 间 非 法 泊 车 的 昼 款 单 ， 这 12 KEK 
都 是 星期 二 和 星期 四 得 到 的 . 求 此 事件 的 概率 〈 他 是 否 只 需要 在 星期 二 和 星期 四 租用 一 
个 车 库 就 没事 了 ). 

续 前 题 . 12 张 罚 款 单 没有 一 张 是 星期 天 得 到 的 ， 能 否 保证 他 星期 天 不 会 收 到 罚球 单 ? 

一 个 匣子 里 有 90 只 好 的 螺丝 钉 、10 只 坏 的 螺丝 钉 . 如 果 从 中 任意 取 用 10 只 螺丝 钉 ， 恰 
巧 都 是 好 的 螺丝 条 的 概率 为 多 少 ? 

从 5 个 记号 abode 的 总 体 中 ， 抽 取 大 小 为 25 的 一 个 样本 ， 求 样本 中 每 类 记号 怡 巧合 
有 5 个 的 概率 ， 把 a 等 同 于 数字 0 和 1，2 等同 于 数字 2 和 3， 等 等 ， 用 随机 数 的 表 来 核 校 
这 个 结果 “. 

若 n 个 人 站 成 一 个 横 排 其 中 有 A 和 B 两 人 ， 问 夹 在 A 和 BB 之 间 恰 有 7 个 人 的 概率 是 多 少 ? 
如 果 他 们 不 是 站 成 一 排 而 是 站 成 一 圈 ， 试 证 这 个 概率 与 7 无关 ， 而 且 它 就 是 1/(n 一 1) 在 
圈 形 安排 中 ， 只 考虑 从 AS BEKEN IA). ~ 

把 3 TMK, BKM TREE ARES? 如 果 : a) RPM ATH: 
(b>) 不 可 分 辨 ， 试 分 别 求 之 . 

试 证 ，4 颗 山 子 掷 一 次 至 少 出 现 一 个 么 点 的 可 能 性 ， 比 2 RE 24 次 至 少 出 现 一 个 双 
入 点 的 可 能 性 为 大 (这 个 问题 回答 了 所 谓 台 ， 曼 来 的 悖 论 ， 台 ，。 曼 来 是 一 个 赌 徒 ， 他 认 
为 这 两 个 概率 应 该 是 相等 的 ， 由 于 赌 运 不 佳 他 曾 谴责 过 数学 )， 

从 一 个 由 个 元 素 构成 的 总 体 中 抽出 一 个 大 小 为 r 的 样本 ， 求 指定 的 NN 个 元 系 不 包含 在 
样本 中 的 概率 ,假定 (a) FOR; b ARE. 当 (i)n 二 100,r 王 NN 三 3; Gidn= 100, 
r 一 入 = 王 10 时 ， 比 较 上 述 两 种 抽样 法 所 得 到 的 概率 . 

谣言 的 传播 .在 一 个 拥有 nti 个 居民 的 城市 里 ， 某 人 告诉 第 二 个 人 一 个 谣言 ， 种 二 个 人 
又 把 谣言 告诉 第 三 个 人 ， 如 此 等 等 ， 在 每 一 步 中 ,谣言 的 接收 者 都 是 随机 地 从 71 个 拓 民 
中 挑选 的 ， 求 下 述 两 事件 的 概率 : 谣言 传播 了 r 次 后 ， (a) 还 没有 回 到 第 一 个 造谣 者 ; 
(b 没有 一 个 人 两 次 听 到 谣言 ， 当 每 一 次 都 把 谣言 同时 告诉 由 城市 中 随机 选取 的 NN 个 居 
民 时 ， 问 上 上面 两 事件 的 概率 等 于 多 少 〈 前 面 的 问题 是 N=1 的 特别 情形 )， 
书信 的 连续 传递 ， 在 一 个 具有 n+l 个 人 的 集体 里 ， 有 一 个 人 我 们 称 为 “祖先 *"， 他 发 两 
封 信 给 另 两 个 人 ， 我 们 叫 “ 第 一 辈 后 代 ”， 而 这 两 个 人 又 各 发 两 封 信 给 别人 ， 一 般 地 ， 第 
r~ 斐 后 代 中 的 每 一 个 人 都 随机 地 发 两 封 信 给 别人 ， 求 出 第 1,2,…,r 辈 后 代 都 不 包含 祖先 
的 概率 .假定 n 充分 大 ， 求 出 分 布 的 中 位 数 . 

一 个 家 庭 问 题 ， 某 家 有 4 个 女孩 ， 她 们 轮流 去 洗 和 餐具 .在 打破 的 4 个 餐具 中 有 3 个 是 最 小 
的 女孩 打破 的 ， 因 此 人 家 说 她 笨拙 ， 她 是 否 有 理由 申辩 这 完全 是 碰巧 ? 讨论 这 一 题 和 球 


L 当 细 胞 暴露 于 有 害 辐射 中 时 ， 一 些 染 色 体 将 断裂 ， 这 可 看 作 此 处 的 手杖 . 长 的 一 段 称 之 为 着 丝 点 . 
如 果 两 个 长 段 或 两 个 短 段 组 合 在 一 起 ， 细 胞 将 死亡 ， 参 看 120]. 
2. 它们 有 时 候 是 非常 地 相近 ， 参 看 [21]. 
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随机 地 放 人 盒 中 的 联系 . 

求 出 下 述 两 事件 的 概率 : (a) 12 个 人 的 生日 在 12 个 不 同 的 月 份 〈 假 定 任何 一 个 人 生 于 12 
个 月 中 之 任 一 月 都 是 等 概 的 ); b) 6 个 人 的 生日 恰巧 在 两 个 月 中 . 

给 定 30 个 人 ， 求 出 12 个 月 中 有 6 个 月 恰巧 包含 两 个 人 的 生日 ; 有 6 个 月 恰巧 包含 3 个 人 
的 生日 的 概率 . 

ERA 双 不 同型 号 的 鞋子 . 今 从 其 中 随机 地 抽取 2r 只 (2r 一 n),， 求 下 面 三 个 事件 的 
概率 : (a) 没有 一 双 同 型 号 的 ;(b)〉 怡 有 一 双 同 型 号 的 ; (co) 怡 有 两 双 同 型 号 的 . 

一 辆 车 子 停 在 共有 NEFA AAAS. FEDS ERMAN, RENT 
位 置 中 恰巧 仍 有 r 个 位 置 有 车 . 问 该 车 左右 相 邻 的 位 置 都 是 空 的 概率 是 多 少 ? 

把 2N 个 男孩 和 2N 个 女孩 合 在 一 起 分 为 两 群 ， 每 群 各 2N 个 孩子 ， 求 每 一 群 中 男女 数目 
相等 的 概率 p， 并 用 斯 特 林 公 式 估计 p. 

证 明 打 桥牌 时 坐 在 西方 的 人 恰巧 拿 到 上 个 爱 司 的 概率 p SER 13 KBAR PIA k TAR] 
的 概率 相等 (直观 上 这 是 很 显然 的 .不 过 要 注意 ， 这 两 个 概率 所 考虑 的 试验 是 不 同 的 ， 
因为 在 后 一 种 情形 中 ，13 张 牌 是 任意 抽取 的 ， 市 在 前 一 种 情形 中 ，52 张 牌 都 要 发 完 ). 

在 桥牌 游戏 中 ， 证明 东家 和 南 家 各 有 mr，n 张 黑 桃 的 概率 和 从 整 副 牌 中 随机 地 取 两 副 (每 
副 13 张 )， 第 一 副 有 m 张 黑 桃 第 二 副 有 ?7 张 黑 桃 的 概率 相同 . 

南北 两 家 共有 个 爱 司 (k 二 0,1,2,3,4)〉 的 概率 为 多 少 ? 

4> a,b,c,d 为 满足 a 十 5 十 c 十 d 二 13 的 四 个 非 负 整数 ， 在 一 次 桥牌 游戏 中 ， 求 东 、 丙 、 西 、 
北 各 家 分 别 拿 到 a,5b,c,qd 张 黑 桃 的 概率 pl(asd.c.d). 描述 一 个 把 红 球 黑 球 放 人 盒 中 的 模 
型 ， 可 这 个 问题 作为 一 个 特例 . 

利用 上 题 的 结果 ， 当 (a) a 二 5,6 一 4,c 二 3,d 二 1] 时 ; (b) a=b =cH—4,d=1 At; (o) a= 
b=4,c=3,d=2 时 ， 求 出 pl(a,b,c,q) 之 值 . 

注意 : 这 三 种 情况 有 本 质 的 区 别 . 

Aa, bcd 为 满足 a 十 b 十 c 十 d= 二 13 的 整数 ， 求 出 在 一 副 桥牌 中 含有 a 个 黑 桃 、5 个 红心 、 
c 个 方块 和 4d 个 梅花 的 概率 g(a,p,c,d)， 并 证 明 这 个 问题 不 可 能 化 为 一 个 把 13 个 球 随机 
地 放 和 人 4 个 盒 中 的 模型 ， 为 什么 ? 

r 张 桥牌 中 爱 司 的 分 布 . 计算 随机 抽取 张 桥牌 ,其 中 恰 有 0,1,…,4 张 爱 司 的 概率 
polr) pilre par). 验证 po GQ) = pi (92-1). 

续 上 题 等 待 时 间 ， 如 果 一 张 - 张 地 抽 牌 ， 求 出 第 1,…， 第 4 张 爱 司 在 第 ”次 抽取 中 出 现 的 
概率 AO f(r)， 猜 测 第 1,…， 第 4 张 爱 司 的 等 待 时 间 的 中 位 数 ， 进 而 算出 它们 来 . 

如 果 两 副 桥牌 中 每 副 都 有 >- 张 ， 而 且 (a) 它们 都 是 从 同一 副 桥 牌 中 取出 的 ; (b》 它 们 是 
从 两 副 桥 牌 中 取出 的 ， 试 求 每 一 副 牌 中 恰 有 上 个 爱 司 的 概率 ， 证 明 ， 当 7 二 13 时 ， 问 题 
(a) 的 概率 与 指定 两 个 桥牌 游戏 者 各 获 上 个 爱 司 的 概率 一 样 . 

印刷 错误 ， 假 设 书 中 每 一 页 都 有 N 个 印刷 符号 ， 它 们 有 可 能 印 错 . 全书 共 有 ?一 500 K, 
r 一 50 个 印 错 的 符号 . 证 明 (a) 第 1, 第 2,…, 第 nn 页 分 别 含有 i,r2,…,rn 个 印 错 的 符 


号 的 概率 等 于 
(人 (Je 


(b) 当 NN 充分 大 后 ， 这 个 概率 可 以 用 (5.3) 来 逼近 ， 并 推出 > 个 错误 分 布 在 区 页 的 问题 


39. 


40. 
41. 
42. 
43. 


44. 
45. 
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近似 于 r 个 球 随 机 地 放 入 nn AEM. GEE: 这 个 可 以 作为 费 米 一 狄 拉克 统计 的 一 个 
普遍 的 极限 性 质 ， 参 见 第 5 节 (a).) 

注意 : 下 面 的 习题 与 第 5 节 的 材料 有 联系 . 

若 把 n 个 不 可 分 辩 的 第 一 类 东西 和 个 不 可 分 辨 的 第 二 类 东西 放 人 2 个 盒 中 ， 试 求 可 区 
分 的 排列 总 数 . 

En ARPA n 个 硬币 一 起 扔 一 次 ， 试 间 有 和 多少 可 以 区 分 的 结果 ? 

把 nn ABR. ro MER, n 个 红 球 进行 排列 ， 试 问 有 和 多少 种 可 以 区 分 的 排列 方式 ? 

把 52 张 桥牌 随机 排列 ， 试 问 没有 两 张 爱 司 紧邻 的 概率 为 多 少 ? 

电梯 ， 在 2.3 节 例 (c) 中 ， 在 开始 时 载 有 ?7 位 乘客 的 一 架 电 梯 在 10 层 楼 的 每 一 层 都 可 作 
停留 ， 这 ? 个 乘客 下 电梯 的 情况 有 各 种 各 样 可 能 的 排列 ， 例 如 我 们 用 (3.2.2) 表示 有 三 
个 乘客 在 某 一 层 同 时 出 去 ， 另 外 又 有 了 商 个 乘客 在 另 一 层 出 去 ， 最 后 两 个 乘客 在 录 一 层 一 
同 出 去 ， 这 种 可 能 的 排列 从 (7) 到 (1,1,1,1,1,1,1) 共有 15 种， 试 求 出 对 应 于 这 15 种 
排列 的 15 个 概率 ， 

EA. ORM 22 个 人 的 生日 的 各 种 不 同情 况 的 概率 . 

如 果 一 副 扑克 恰巧 是 下 列 事件 之 一 ， 试 分 别 求 其 概率 : 

(a) 最 大 同花顺 ¢ “10”, “J”, “Q”, “K”, “A” WEEE); 

Cb) 四 同 点 (4 张 牌 的 面值 相同 ); 

(c) 满堂 〈《 有 一 对 其 余 3 张 同 面值 ); 

(d JAF (5 张 牌 的 面值 顺序 连续 ， 但 不 考虑 花色 ); 

(e) 三 同 点 (3 张 的 面值 相同 与 2 张 不 同 的 牌 ) ; 

({) 两 对 (4 张 牌 成 两 对 与 另外 的 一 张 牌 ); 

(g) 一 对 (两 张 牌 同 面值 与 男 外 3 张 不 同 的 牌 ). 


2.11 问题 和 理论 性 的 附录 
一 个 总 体 中 有 7 个 元 素 ， 其 中 有 np 个 红 的 、 ng FÈRRI (8 十 co 一 1)， 有 放 回 地 抽取 大 小 为 
-的 随机 样本 ， 试 证 其 中 恰 有 到 个 红 的 概率 为 


jean. (11.1) 


—-AB LGR OBIE EH. Mn ROK, ME m/n=p. Wh (6.1) A (6.2) 所 给 
出 的 概率 w 与 (11.1) 很 近似 ， 更 精确 地 说 有 


(eB) a AY ach) an) 
把 它 和 前 一 个 问题 比较 ， 则 表明 : 对 大 的 总 体 来 说 ， 有 放 回 的 抽样 和 无 放 回 的 抽样 在 实 
际 上 并 无 什么 区 别 ， 
从 一 个 拥有 nn 个 元 素 的 总 体 中 无 放 回 地 抽取 一 个 大 小 为 > 的 随机 样本 ， 某 指定 的 六 个 元 


a i dl 


Ma 


1 从 (9.9) 出 发 可 以 证 明 : 4d; 二 C 十 (12n) 一 1 一 (360m)-1 十 …， 而 (360m3) 1! 后 面 诸 项 之 和 被 nR 
以 常数 所 控制 . 
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素 全 部 被 抽 中 的 概率 u, 为 


u= (N C) (11. 3) 


[对 有 放 回 的 抽样 来 说 ， 其 对 应 的 公式 由 1.10 给 出 ， 它 不 可 能 由 此 直接 推出 . 
(11.3) 的 另外 一 种 形式 ， 请 参阅 第 4.6 市 习题 9.) 
极限 形式 ， 如 果 co 和 reo r/n>p, Mu—p* (参见 问题 13 )， 
注意 :: ”问题 5 一 问题 13 与 著名 的 占 位 问题 有 联系 (麦克 斯 书 一 玻 耳 兹 曼 统 计 ): 也 就 
是 说 ,，r 个 球 分布 在 n AEP, an 种 可 能 中 每 一 种 可 能 的 概率 都 是 n“. 
BREDA PIA k PERE p 由 二 项 分 布 (4. 5) 所 给 出 ， 最 大 可 能 的 整数 满足 
《rr 一 nn 十 1/n 过 v 朗 (7 十 1)/n，( 换 句 话 说 ， 它 人 说明 po <p << py -1 S pu > Poti > pr. 
参见 问题 15. ) 
极限 形式 ， 如 果 n->co 和 广 *co 使 得 每 个 盒 中 球 的 平均 数 一 ~ 保持 常数 ， 则 

pee *A*/RI. (11. 4) 
(这 就 是 泊 松 分 布 ， 它 将 在 第 4 章 中 讨论 ， 参 见 问 题 16.) 
令 A(r,n) 为 nn 个 盒 中 没有 一 个 是 空 的 可 能 分 布 的 个 数 ， 用 组 合 分 析 的 推理 证 明 


A(lr,n 十 1) = D (TA kn, (11.5) 
k= 
并 推出 
Arn = DOD ("Jaw (11. 6) 


v=0 


提示 : 应 用 归纳 法 ,假定 CLO 成 立 ， 并 且 以 此 表示 《〈11.5) 中 的 AClr 一 k,n)， 交 换 求 和 
的 次 序 ， 并 用 二 项 公式 将 A(r,n 二 1) 表示 为 两 个 单 重 和 的 差 . 将 〈11.6) AP ot 用 一 个 
新 的 求 和 指标 代 符 并 应 用 (8. 6). 
注意 : AX (11.6) 是 一 个 古典 问题 的 理论 上 的 求解 ， 用 它 来 直接 计算 概率 是 不 方便 的 . 
例如 ， 某 一 乡村 有 1900 个 居民 ， 用 这 个 公式 末 算 一 年 中 每 一 天 村 里 都 有 人 过 生日 的 概率 
x 就 很 麻烦 ， 在 第 4.2 节 中 ， 我 们 将 用 另 一 种 办 法 推出 公式 (11. 6)， 并 且 得 到 一 个 简单 
的 近似 公式 〈 对 上 面 的 例子 来 说 ， 工 近似 地 为 0.135). 
证 明 恰 有 m 个 盒 是 空 的 可 能 分 布 的 种 数 为 
il n H _ m 

FE,(r,n) = (7 JAn = m = (aaco y )(n—m— vy". (11.7) 
不 用 上 面 的 结果 来 直接 证 明 恰 有 m 个 盒 是 空 的 概率 Pm (rn =n En Cr nT 
ATM E pp rm H, 
n nt 
应 用 问题 7 和 8 的 结果 ， 用 直接 计算 的 方法 来 证 明 (11.8) 成立 ， 证 明 这 种 方法 可 以 给 出 
(11.6) 一 个 新 的 推导 〈 对 作 归 纳 法 )， 


(11. 8) 


Dn (rr 十 1,n) = pn (r,n) 


L 问题 5 一 19 在 量子 统计 中 ， 在 摄影 感光 版 的 理论 中 ， 在 G-M 计数 器 等 等 中 都 有 应 用 ， 因 此 ， 在 物 
理学 文献 中 这 些 公 式 都 是 经 常 讨论 、 经 常 出 现 的 ， 通常 是 没有 把 它们 的 重要 的 和 本 质 的 初等 性 原 加 
以 抽象 ， 几 乎 所 有 的 在 这 章 开始 时 所 引进 的 问题 在 惠 特 活 思 (Whitworth) 的 书 中 都 碰 得 到 (虽然 
形式 稍 有 不 同 ). | 
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11. 从 问题 8 推出, 等 于 或 多 于 m 个 盒 是 空 的 概率 x,(r,n) 为 


Acv a- z, (11. 9) 


(4 mm 之 n 时 ， 这 个 式 子 为 0， 这 是 意料 中 的 事情 . ) 提示 : 证 明 x, (rn) — pn ron) = amt (rn), 
12. 六 个 指定 的 盒 中 ， 每 一 个 都 被 占有 的 概率 为 


ultron) =" D1 (7 JAk Na = N)™. (11. 10) 
k=0 
FH JEG BST E 
ulr n) = Sow(N)a-2y. (11.11) 
v=0 U n 


《应 用 二 项 式 定 理 . 对 N=n RS ulr =n Alr, mn. UB: (11.11) 类 似 于 有 放 回 
的 抽样 ;的 公式 〈11. 3)， 另 一 个 推导 参见 第 4. 6 PAM 8. ) 
13. 极限 形式 ， 如 果 换 作 问 题 4 中 的 极限 描述 ， 我 们 有 urin >e)”, 
注意 : 在 问题 14 一 19 F, ren 的 意义 与 以 前 一 样 ， 但 是 我 们 假定 球 是 不 可 辨别 的 ， 而 
且 全 部 可 辨别 的 排列 都 是 等 概 的 〈 波 司 - 爱 因 斯 坦 统计 ). 
14.。 某 一 个 指定 的 盒 中 恰 有 上 个 球 的 概 举 为 
a= ("rey PETE) (11.12) 
15. WEAR: “4n>2M. E — AEE PRA TRAD REREN O, 或 者 更 精确 地 说 ， 
qo 之 qi 之"…* (参见 问题 5). 


16， 极 限定 理 ， 今 n 一 co 和 rr>co 使 得 每 一 个 盒 中 平均 的 质点 个 数 r/n tat A. TE 
A 


eT: (11.13) 
(右边 称 为 几何 分 布 . ) 
17。 恰 有 疡 个 盒 是 空 的 概率 为 
n r— 1 nt+r—1 
m= (")( a )/( r )- C11. 14) 
18， 某 指定 的 m 个 盒 中 的 球 的 总 数 恰 为 的 概率 为 
= f{mtj-ly 17 一 7 十 r 一 7 一 ] n 十 7 一 1 
gm ("Tn )/ ( rd. (11. 15) 
19. IRER. 如果 换 作 问题 4 中 的 极限 描述 ， 我 们 有 
mti-l | 
gym ("I ) (11. 16) 


(右边 是 在 第 6 章 第 8 节 中 引进 的 负 二 项 分 布 的 特殊 情形 ). 


1. 注意 : u(r,n) 可 以 解释 为 当 第 N 个 元 素 加 人 样本 时 所 需 之 等 待 时 间 小 于 r 的 概率 ， 其 结果 可 以 应 
用 到 随机 抽取 数字 中 去 : 其 中 wr;10) 一 u(r 一 1,10) 为 长 为 r 的 序列 中 包含 了 由 全 部 10 个 数字 所 构 
成 的 全 集 的 概率 ， 这 个 可 以 用 来 作 随机 检验 .格林 伍德 〈Greenwood) (参见 [22 ]) 把 这 些 分 布 列 
成 一 个 表 ， 并 把 它 与 一 些 真实 的 计算 进行 比较 ， 这 些 计算 是 对 应 于 的 前 2035 位 小 数 和 e 的 前 
2486 位 小 数 的 等 待 时 间 ， 全 部 10 个 数字 构成 的 全 集 的 等 待 时 间 的 中 位 数 是 27， 这 个 等 待 时 间 超 过 
50 的 概率 大 于 0. 05， 而 等 待 时 间 超 过 75 的 概率 大 约 为 0. 0037， 
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关于 连贯 的 定理 ， 在 问题 20 一 25 中 ， 我 们 考虑 由 zn ha Mr. 个 8 所 构 万 之 排列 ， 而 且 假 
定 所 有 排列 都 是 等 可 能 的 [参见 2.4 节 例 Cd]. 这 一 组 问题 与 第 5 六 (b) AKR. 
EHI PRA k TER 〈 不 分 种 类 ) 的 概率 当 k= 20 是 偶数 时 为 


pa =(P (BN) ECE) (11.17) 


X k=2v +l 为 奇数 时 ， 其 概率 为 


Pz,+1 = | (m ) (+ U ) (272) VET” ). (11. 18) 
续 上 题 . 推出 连贯 的 个 数 的 最 大 可 能 数值 为 满足 


eri ro 2r) re 


Fn eS tr, +3 


的 整数 ek. GER: FEE Pore / Poy AM Poort / Pot. ) 

排列 中 以 一 个 长 为 之 之 0 的 a- 连贯 开始 的 概率 为 (7 dorz / Cri tre) GER: 选取 v 个 a 
和 跟随 其 后 的 P).， 当 mw 一 0 时， 定理 蕴涵 了 什么 呢 ? 

恰 有 个 a- 连 贯 的 概率 为 


m= (BODE CT) (11.19) 


提示 ， 这 可 以 由 第 5 节 的 引 理 的 第 二 部 分 直接 推出 ,另外 ,方程 1119 可 以 由 
(11.17) Ml (11.18) 推出 ， 不 过 此 过 程 比 较 繁琐 . 
第 n 个 a 恰 在 和 个 8 之 前 的 概率 为 


(" tr nam) (mtn) )/ tn ). C11. 20) 


全 部 a 分 处 于 个 连贯 中 ， 其 中 有 Ry 个 长 度 为 l, k 个 长 度 为 2 个 长 度 为 vw (ki + 
kote th =k) 的 概率 为 


ETETETT AEN (2 )/ UDH ). (11.2) 


2.12 ”二 项 式 系数 的 一 些 问题 和 恒等式 
对 于 整数 n 宇 2 证 明 
+G- 
PeH 
(7)—2(%)+3(3)—+.=0, (12. 1) 


2 。 1( > ) 十 3 2{% )+4 . 3(7) HSn D2. 


提示 :应 用 二 项 式 公式 . 
证 明 : SE FIERA Me, RNA 
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O-O -EE az» 
和 更 一 般 地 ， 我 们 有 
SG Pye = (ato. (12. 3) 
对 于 任何 的 a>0, WA 
(Jace). (12. 4) 


如 果 a EARR, AAE RL RR at = (1 一 z+) ! 进 行 多 次 微 商 来 证 明 . 
证 明 
1 
人 zc 人 下 


l 
1 (2n 2) onti — ¢ 4) > 
LEPa] 
对 于 非 负 整数 n Ar 各 一 切实 数 & Rik, WA 


D= GID GED (2.8) 


提示 ， ME (8.6). n=a 的 特别 情形 是 经 常用 到 的 . 
对 于 任意 a 和 整数 4 学 0， 证 明 


Mev (*)= ev (*~*). (12.7) 


v=0 


(12.5) 


提示 : 应 用 方程 (8. 6). 

—~/utk—-l rk 

>| k—1 = C} (12. 8) 
(a) FA (8.6) 证 明 这 个 等 式 ，(b) 证 明 (12.8) 是 (12.7) 的 特殊 情形 ，(c) 用 归纳 法 
证 明 (12. 8) 给 出 第 5 节 的 引 理 的 第 一 部 分 的 一 个 新 的 证 明 . Cd) 证 明 (12.8) 等 价 于 
/7\ /n+l 

(= Gak (12. 8a) 


J=0 


在 第 6 PME MALI AMSA 1. UAE ER a, b, n 来 说 都 有 


(OHH 2 te HOO) Cy”): (12. 9) 
用 归纳 法 证 明之 . 提示: 首先 证 明 (12.9) 对 a=1 和 全 部 2 都 成 立 . 
续 上 题 ， 用 比较 方程 
(1 十 2)*(1 十 12)? 二 (1 十 让 中? (12. 10) 
两 边 r 的 系数 的 办 法 来 更 一 般 地 证 明 : (12.9) IER asb (KIELER n) 部 成 立 . 
应 用 方程 (12.9) WEH 


1. 读者 回忆 一 下 (8. 5) 的 约定 ， 如 果 v 跑 饥 全 部 整数 ， 则 (12. 3) 中 的 和 中 只 有 有 限 多 项 非 0 
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12. 
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14. 


15. 


16. 


17. 


18. 
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(3) +7) #3) t+) =), (12.11) 
应 用 方程 (12.11) 证 明 
w! (Py. 


Li lY anol 


WEAR: 对 于 整数 0 二 a 过 5 有 
Dene- (2) (12. 13) 


提示 : 应 用 (12.14) WEAR (12.11) Æ (12.9) 的 特别 和 情形， 此 外 ， 再 比较 (1 一 六 
(1 一 1 二 (1 一 1 个 ?两 边 ee WB 
从 (12.9) 用 特殊 方法 推出 恒等式 


(2)-(,2,)+-#({)41=(%,°) (12. 14) 


(12. 12) 


和 
Mev (2) (= (7—3) (12. 15) 
对 正 整数 k，n Mr 都 成 立 ， 提示: 应 用 (12. 14). 
应 用 方程 (12.9) 证 明 
i ane a (arer es"). (12. 16) 


了 一 0 


提示 ， 应 用 方程 02.4 的 左右 两 边 并 用 2.10) (改变 指数 的 符号 ). 注意 8 一 1,2 的 重 
要 的 特殊 情形 . 
和 第 11 节 中 的 问题 联系 起 来 ， 注 意 : 方程 (11. 12),(11. 14),(11.15) 和 (11.16) 都 定义 
为 概率 ， 因 此 ， 在 每 一 个 方程 中 诸 量 之 和 为 1. 证明: 这 些 关系 分 别 地 被 (12. 8),(12.9)， 
(12. 16) 和 和 二 项 式 定理 所 缠 泣 |. 
从 第 11 节 问 题 7 中 关于 ACr,n) 的 定义 出 发 ， 可 以 推出 ， We r<n, 则 ACr,n) 一 0， 而 且 
Aln,n) 一 n!1。， 换 名 话说 

n 0 mRr<n, 

dy ( E = i maron (12.17) 
(a) ME n H n—1 的 办 法 直接 证 明 (12.17)，(b) 其 次 用 考虑 对 (1 一 e )" 在 t= 二 0 处 r+ 次 
微 商 的 方法 来 证 明 (12.17). Cc) M (11.11) 出 发 而 不 从 (11. 6) 出 发 来 推广 (12. 17). 
如 果 0 过 Nn， 用 归纳 法 证 明 : 对 每 个 整数 ~ 这 0， 都 有 


sev (Soro, = (PZA) (12. 18) 
GER: 4 r<Nfr>nt, BHO.) 用 考虑 对 1"”N(t 一 1)” 在 :一 1 处 进行 上 次 微 商 的 
办 法 验证 (1Z. 18). 
用 归纳 法 证 明 (应 用 二 项 式 定 理 ) 


(”) 寺 一 (ote top (") tart tt tte te. (12. 19) 


用 积分 恒等式 Slap = {1 一 (1 一 4)") 让 的 办 法 来 验证 (12. 19). 
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22. 


23. 
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证 明 对 任何 正 整数 m 都 有 


m 1 
Cr+ ytz)” = » rete ; (12. 20) 


其 中 求 和 号 是 对 全 部 满足 a 十 5 十 c= 二 mm 的 非 负 整数 a ,b,c 来 求 和 的 . 
WER r (a 十 1) =a (a) 对 一 切 a 之 0 成立， 注意 


Tay Twat 
( ) = (一 De Lath (12. 21) 


k! Ta)’ 
证 明 对 任何 正 整数 <，2 都 有 


(atl) (at+2) ++ Carn) b! a 
OFDD OF2) = (tn) al” ` (12. 22) 
T- RREAN F : 
toc 
I(x) =| edt, (12. 23) 


其 中 过 >>0. 证 明 T (x) 一 (22e "rx Oo? GER: MR z 一 是 一 个 整数 ， 则 T= 
(n—1)!). 
邻 a 和 r 是 任意 正 数 ， 而 n 是 一 个 正 整 数 . 证 明 

a latr) (at2r) + (atnr) Cl art (12. 24) 
[常数 CETO /Tla/n. | 
应 用 前 面 一 个 问题 的 结果 ， 证 时 


a (atr) (at2r) es (atnr) TT (Ob/r) way 
b (btr) (b+2r) (二 rr》 T a/n" 


(12. 25) 


用 (8.10) 证 明 ， 
et~e (0<< it<< 1] ). (12. 26) 


第 3 章 扔 便 币 的 起 伏 问 题 和 随机 人 徘 知 


这 一 章 的 内 容 偏离 了 本 书 的 主题 ， 它 仅仅 在 第 5 章 中 重 被 提起 ， 传 统 上 ， 其 材 
料 被 用 作 初 等 讨论 并 引出 一 些 更 为 高 等 的 理论 .其 方法 简单 ， 却 能 很 快 引导 我 们 得 
到 具有 长 远 理论 意义 和 现实 重要 性 的 结果 ， 将 要 获得 的 理论 结果 不 仅 是 想像 不 到 的 ， 
而 且 能 给 直观 和 常识 以 很 大 的 冲击 ， 它 们 将 揭示 : 一 般 人 接受 的 关于 随机 起 伏 的 概 
念 是 没有 根据 的 ， 而 且 对 大 数 定律 的 含义 也 有 很 大 的 误解 例如， 在 很 多 应 用 中 ， 
人 们 总 假定 ;在 一 个 很 长 的 时 段 中 对 扔 一 个 硬币 的 观察 所 获得 的 统计 特性 ， 与 很 多 
次 独立 博弈 在 某 一 给 定 的 时 刻 所 观察 到 的 结果 一 样 ， 这 是 不 对 的 .用 现时 流行 的 述 
语 说 ， 我 们 得 到 一 个 结论 : 一 个 均 旬 的 硬币 的 总 体 ， 其 中 大 多 数 需 要 校正 ， CW 
解释 ， 见 第 6 节 和 例 4. b.) 

本 章 的 材料 目前 常用 分 析 的 方法 来 处 理 ， 因 而 其 结果 显得 很 高 深 后 面 将 用 初 
等 方法 :， 它 将 说 明 组 合 方法 是 一 个 新 的 强 有 力 的 方法 的 例证 ， 其 结果 是 本 书 的 续 访 
第 二 卷 将 要 讨论 的 一 类 广泛 的 起 伏 现象 的 一 个 漂亮 的 代表 . 全 部 结果 都 将 重新 用 不 
同 的 方法 独立 地 推出 ， 因 此 ， 这 一 章 主 要 为 这 两 类 读者 服务 : 一 类 是 不 急于 涉及 系 
统 理论 的 读者 ; 另 一 类 是 不 要 求 细节 而 仅仅 对 概率 论 的 精髓 感 兴趣 的 读者 ， 对 其 他 
的 读者 ， 比 较 .下 不 同 的 方法 也 是 有 益 的 . 因此 ， 读 者 应 将 这 一 和 章 独立 地 或 平行 于 
本 书 其 余 的 内 容 来 阅读 ， 


3.1 一 般 讨 论 及 反射 原理 


按 正 式 的 观点 ， 我 们 考虑 有 限 个 加 号 与 减 号 的 排列 .考虑 n= pta NS e, 
< ,每 个 符号 代表 十 1 或 一 1 ,而且 其 中 恰 有 户 个 加 号 和 9 HRS. 部 分 和 s Her te te 
代表 前 面 有 个 位 置 中 十 1 的 个 数 与 一 1 的 个 数 的 差 . 于 是 

Sp— Sy Se = El, SQ =O 5S, = P| (i. 1) 
此 处 k=l, Z, n. 
我 们 将 用 几何 术语 和 直角 坐标 t,x 来 描述 问题 ， 为 确定 起 见 ， 用 t- 轴 表示 水 平 
轴 ( 横 轴 )，x- 轴 表示 垂直 轴 ( 纵 轴 )， 排 列 (e1 ,…,e,) 将 用 一 条 折线 来 表示 ， 其 第 & 
条 边 具 有 和 斜率 et:， 其 第 上 个 顶点 具有 坐标 ss， 称 这 种 折线 为 “路 径 ”. 


L 这 一 章 可 以 略 去 ， 或 者 和 下 面 几 章 结合 起 来 读 ， 在 第 10 章 (大 数 定律 ), 第 11 章 〈 初 过 时 间 )， 第 13 章 
(事件 )， 第 14 章 〈 随 机 徘徊 ) 中 都 将 要 参考 本 章 的 内 容 ， 不 过 ， 后 面 没有 明显 地 用 到 这 些 内 容 ， 

2. 该 初等 方法 的 发 现 ， 是 本 书 第 二 版 (1957 年) 收 进 这 一 章 的 主要 动机 .现在 这 第 三 版 是 新 的 ， 雍 
大 大 地 改善 了 这 一 章 ， 因 为 它 避免 了 各 种 组 合 技巧 . 
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EM 令 n>0 且 nn 和 Xx 都 是 整数 一 条 从 原点 到 点 (ner) 的 路 径 Corser, 
s) 就 是 一 条 满足 下 述 条 件 的 折线 : CHARA OSL, + Fe WBA 5005, 508 5,5 
LEMERRE A.D RE s =r. 

我 们 称 n ARBVEM KE. KEA nM Res 2” 2. MRe 中 有 个 正 的 9 个 
HAJ., M 

n=ptq, x=p—dq. (1. 2) 
Re4nh sc HE (1.2) 式 时 ， 从 原点 到 (nx) BRATE. ERDARA., Ee 
所 处 的 p 个 位 置 可 以 从 n= 二 =p 十 9g 个 位 置 中 任意 挑选 ， 共 有 
prq pr 
N= (POT) = (P09) (1.3) 

种 不 同 的 选 法 ， 为 方便 起 见 ， 当 n 和 x 不 满足 1.2) AM, ZXN,, = 0. ERAH 
定 下 ， 从 原点 到 任意 一 点 (n, x) MBEAN, ,条 不 同 的 路 径 . 

在 我 们 回 到 本 草 的 主题 随机 徘徊 以 前 ， 先 讲 二 个 应 用 的 例子 . 

例 (a) 选 举 问 题 、 下面 的 有 趣 的 命题 是 惠 特 疾 思 (W. A. Whitworth) 于 1878 
年 证 明 的 ， 其 后 在 1887 年 伯 特 兰 (J. Bertrand) 也 证 明了 此 命题 . 

假设 在 一 场 选举 中 ， 候 选 人 也 获得 户 张 选票 而 候选 人 Q 获得 了 9q 张 票 ， 此 处 户 二 d. 
那么 ， 在 整个 的 计 票 过 程 中 ，P 的 得 票数 总 是 比 QQ 的 得 票数 多 的 概率 是 (p 一 g)/(p 十 q). 
在 选举 问题 的 名 称 下 ， 类 似 的 排列 问题 曾经 引起 过 研究 组 合 分 析 的 学 生 们 的 兴趣 .组合 
方法 近年 的 兴盛 ， 提 升 了 他 们 的 名 气 ， 而 且 很 多 重要 的 问题 可 用 各 种 广义 的 选举 问题 来 
重新 描述 ， 


O N 

图 3-1 正路 径 示 意图 ， 该 图 还 说 明 : 从 原点 到 (27.0) 的 严格 正路 径 的 条 数 与 从 原点 

到 (22 一 2,0) 的 非 负 路 径 的 条 数 完全 一 样 
计 票 全 过 程 的 记录 可 以 用 一 条 长 度 为 pHa 的 路 径 来 表示 ， 其 中 ee 一 十 1 表示 第 
票 投 给 了 候选 人 了 P， 反 过 来 ， 每 一 条 从 原点 到 点 (p 十 9,p 一 g) 的 路 径 ， 可 以 解释 
为 一 个 总 要 数 为 p 十 g 的 一 个 投票 过 程 的 记录 . 显然 ，5 BAR 票 计 算 过 后 ， 候 选 人 
P 领先 或 落后 的 票数 .候选 人 PP 在 整个 计 票 过 程 中 和 忆 领 先 当 且 仪 当 5, 0,75, 0, 
即 是 所 有 的 顶点 严格 地 在 1- 轴 上 面 ，( 图 3-1 中 从 OO 到 Ni 的 路 径 就 是 这 类 路 答 .) 
选举 定理 默认 所 有 的 路 径 都 是 等 可 能 的 . 于 是 此 结论 化 归 为 本 节 末 尾 将 要 证 明 的 
“反射 引 理 ” 的 一 个 直接 推论 . 

(b) 高 尔 顿 〈Galton) 的 秩序 检验 9， 假定 某 一 个 量 “〈 例 如 植物 的 高 度 ) 对 了 种 处 
理 过 的 项 目的 每 一 种 都 测量 一 次 ;对 > 种 控制 的 项 目的 每 一 种 也 测量 一 次 ， 令 这 两 组 
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测量 值 分 别 为 a1 ，… ,a, 和 ，…,b,， 为 确定 起 见 ， 每 一 组 都 按 递减 排列 a >a, > A 
b> b, > (为 避免 不 足 道 的 繁 瑛 ， 假 定 没有 两 个 观察 值 是 相等 的 )， 现 在 ， 我 们 这 两 
个 序列 组 合成 1 个 长 为 2=2r 的 下 降 的 序列 ， 对 于 一 个 极端 的 情况 ， 应 该 是 所 有 的 
都 在 前面， 而 一 般 情 况 应 该 是 所 在 的 a 和 所 有 的 2 是 随机 排列 的 ， 因此， 处 理 的 效率 
可 以 用 同一 行 中 4 在 6 前 面 的 个 数 来 判断 ， 这 就 是 说 ， 用 满足 条 件 a >b 的 下 标 k A 
AARAU. EANA 1876 年 第 一 次 用 了 这 个 想法 ， 而 他 所 使 用 的 数据 是 达尔 文 
(Darwin) 提供 的 ， 当 时 所 取 的 r= 二 15， 其 中 4 有 13 次 在 4 的 前 面 . 缺乏 概率 知识 的 商 
尔 顿 断言 ,处理 是 有 效 的 但是， 如 果 假 定 有 充分 的 随机 性 ，a 在 5 前面 的 次 数 大 于 或 
等 于 13 的 概率 是 3/16. 这 就 意味 着 ， 对 完全 无 效 的 处 理 而 言 ， 在 16 次 试验 中 会 出 现 
3 次 让 高 尔 顿 认为 处 理 有 较 好 的 效果 的 场合 ， 这 就 证 明 : 定量 分 析 对 不 可 徘 的 直观 判 
上 断 ， 是 一 种 有 价值 的 补充 . 

如 果 用 路 径 的 术语 来 解释 ， 者 组 合 的 序列 中 的 第 & 项 是 一 个 & 则 记 e 王 十 1， 征 
一 个 5 则 记 es 王 一 1， 所 获得 的 是 一 条 长 为 2r 的 联结 原点 与 1- 轴 上 的 点 〈2r,0) 的 路 
径 ， 事件 a, >, 4 AMM so B/D ELA k 个 加 号 才 发 生 ， BO FE sy) 0. OTE h 
$y, 0, 因而 第 2k— 1 和 第 Zk 条 边 都 在 t- 轴 的 上 方 . 由 此 推出 : a, > 6, 成 立 v 次 当 且 
仅 当 2v 条 边 在 1- 轴 的 上 方 ， 在 第 9 节 中 我 们 将 要 证 明 一 个 意 想不到 的 结果 ， 那 就 
E: 这 个 事件 的 概率 为 1/(1 十 ”> ， 它 与 无关. 〈 基 于 连贯 理论 而 与 此 相关 的 检查 ， 
请 参见 第 2.6 T b.) 

(c) 科 人 尔 莫 器 罗 夫 - 斯 米尔 诺 夫 (CKolmogorov-Smirnov) 检验 . 考虑 生长 在 不 同 地 
区 的 同一 生物 类 (动物 或 植物 ) 的 两 个 总 体 ， 或 者 比较 两 种 相似 的 机 器 的 产品 ， 为 
了 确定 性 ， 我 们 只 考虑 一 个 可 测量 的 特征 量 ， 例 如 高 度 、 宽 度 、 厚 度 等 ， 这 两 个 总 
体 中 每 一 个 都 有 由 > 个 观察 值 组 成 的 样本 : wm ，…'a 和 61,…,b.. 粗粮 地 说 ， 间 题 就 
是 : 这 些 数据 是 否 与 “两 个 总 体 在 统计 是 恒 等 的 ”这 一 假设 相符 合 . 用 此 方式 提问 
题 ， 虽 然 较为 含糊 ， 但 是 ， 为 了 我 们 的 目的 ， 并 不 需要 讨论 现代 统计 理论 的 更 精确 
的 陈述 ， 只 需 说 明 检 验 是 基于 比较 两 个 经 验 分 布 就 够 了 ， 对 于 每 一 个 :， 定 义 A() 为 


AE, HP k EME a e 的 下 标 i 的 个 数 ， 称 这 个 定义 在 实 轴 上 的 函数 A 


La, } 的 经 验 分 布 ， 类 似 地 ， 我 们 可 以 定义 {5} 的 经 验 分 布 B(t)， 斯 米尔 诺 夫 在 1939 
年 首次 用 精确 的 数学 理论 推出 了 : 差 |AQ) 一 B() | 的 最 大 值 的 概念 分 布 ， 还 推出 了 为 
外 一 - 些 量 的 概率 分 布 ， 这 些 结果 可 以 用 来 检验 前 述 假设 .这 个 理论 是 较 楷 难 的 . 格 回 
坚 柯 (Gnedenko) 极 大 地 简化 了 这 一 理论 并 使 之 更 加 直观 ， 他 的 主要 思想 是 把 这 个 问 
题 与 路 径 的 几何 理论 联系 起 来 ， 在 前 面 的 例子 中 ， 我 们 曾 把 两 个 样本 与 一 条 从 原点 到 
点 (2r,0) 的 路 径 联 系 起 来 ， 说 两 个 总 体 是 统计 地 不 可 区 分 的 ， 和 说 抽样 试验 中 所 有 


1. 原著 在 此 把 生 误 写 为 失 ， 且 对 经 验 分 布 的 叙述 亦 不 甚 清楚 ， 译 者 在 此 作 了 订正 ， 一 一 译 者 注 
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可 能 的 路 径 都 是 等 可 能 的 是 一 样 的 ， 因 为 易 见 ，|AQ) 一 BG) | 之 & 对 某 个 1 成 立 等 价 于 
ls, | > Er 对 时 个 成立， 这 个 事件 的 概率 就 是 一 条 长 为 2r 的 从 原点 到 点 !(2r,0) 的 路 径 
不 能 被 界 于 土 &r 的 区 间 所 控制 的 概率 . 这 个 概率 早 就 知道 了 ， 因 为 它 与 随机 徘徊 中 的 
破产 问题 和 具有 吸收 壁 的 扩散 中 的 物理 问题 有 联系 (参见 3. 10 节 习 题 3). 

此 例 超出 了 本 卷 书 的 范围 ， 但 它 说 明 随 机 徘徊 能 用 到 完全 不 同类 型 的 问题 中 去 . 

(d) 理 想 的 扔 硬币 游戏 与 它 和 随机 过 程 的 关系 .一 条 长 为 n 的 路 径 可 以 解释 为 连 
续 扔 几 次 硬币 的 理想 的 试验 的 记录 . 如果 十 1 代表 正面 ， 则 % SF GERM) 第 上 次 
试验 完毕 时 正面 超过 反面 的 累积 数 . 古典 的 描述 是 虚构 一 个 赌 徒 彼得 ， 他 在 每 次 赠 
博 中 要 求 赢 1 元 或 输 工 元 .序列 5 ,ss，… ,ss 代表 彼得 的 连续 的 累积 纯利 .我 们 将 会 
看 到 ; 它们 将 被 纳入 具有 意 想不到 的 性 质 的 随机 起 伏 理论 中 去 . 

赌博 的 形象 性 语言 不 应 损害 扔 硬币 模型 的 重要 性 ， 事实 上 ， 这 类 模型 可 以 作为 
许多 更 复杂 的 模型 的 初步 逼近 ， 这 些 模 型 有 : 物理 中 随机 相依 的 过 程 ， 经 济 学 ， 教 
= uen 等 等 ， 许 多量, 例如 物理 质点 的 能 量 , 个 人 的 财 宣 ， 坏 人 被 教养 的 累积 
时 间 ，……… 等 等 ， 由 于 连续 的 碰撞 或 某 种 随机 的 干扰 ， 它 们 都 是 变化 的 .作为 初步 
的 讨论 ， 假 定 每 个 个 体 变化 的 量 值 是 一 样 的 ,但 其 符号 由 扎 硬 币 的 博 弃 来 决定 ， 更 
精细 的 模型 是 : 从 一 次 试验 到 另 一 次 试验 ， 其 改变 量 和 相应 的 概率 都 在 变化 ， 对 此 ， 
其 至 是 简单 的 扔 硬币 的 游戏 模型 ， 都 可 得 出 令 人 惊奇 和 震惊 的 结果 . 它们 的 现实 重 
要 性 在 于 : 它们 证 明了 与 通常 被 接受 的 观点 相反 的 事实 ， 通常 的 观点 是 : 控制 茶 组 
个 体 观 察 值 的 延 拓 序列 的 法 则 将 表明 ， 由 观察 值得 到 的 性 质 和 均值 将 与 由 总 体 得 到 
的 这 些 性 质 有 很 大 的 偏差 . 换言之， 现在 流行 的 心理 学 的 检验 会 导致 人 们 说 : 在 一 
个 “均匀 的 ”硬币 的 总 体 中 ， 许 多 硬币 都 是 “铸造 不 民 的 ”. 

扔 硬币 中 的 随机 起 伏 是 更 一 般 的 具有 累积 影响 的 随机 过 程 的 典型 如果 连 简单 
的 扔 硬币 的 博弈 都 会 推出 一 些 与 直观 不 符 的 含糊 的 结论 ， 那 么 ， 有 理由 认为 ， 直 观 
在 处 理 复 杂 的 问题 时 不 能 做 可 靠 的 指导 . > 

令 人 惊奇 的 是 ; 许多 重要 的 结论 可 以 从 下 面 的 简单 引 理 推出 . 

4 A=(a,a) 和 B= OD 为 正 象限 内 的 整 点 : 6>a20,a>0.p>0. MART 
x 轴 的 反射 点 就 是 点 A’ 二 (a, 一 a ) (ARLE 3-2). AAR) B 的 路 径 的 定义 仍 如 3.1 
节 ， 不 过 这 里 A 点 相应 于 那里 的 原点 . 

引 理 :( 反 射 原理 ) 从 A 到 B 的 路 径 中 和 触 到 或 者 穿 过 x 轴 的 路 径 的 个 数 等 于 从 
A’ 到 B 的 路 径 的 个 数 . 


1. 原著 在 此 误 写 为 (0,2r)， 应 为 (2r,0)， 一 一 详 者 注 

2. 反射 原理 有 不 同 的 应 用 方式 ， 但 无 几何 解释 ， 以 一 种 精细 但 费解 的 面貌 出 现 ， 概 率 文献 中 认为 此 为 
安 德 烈 (Andre) 1887 年 所 得 ， 在 第 14. 9 节 的 随机 徘徊 的 差分 方程 中 还 会 出 现 . 它 与 某 些 偏 微分 
方程 有 联系 ， 那 儿 把 反射 原理 作为 映 象 法 来 使 用 ， 它 是 麦克 斯 书 和 开尔文 勋 枉 所 提出 的 ， 关 于 重复 
反射 的 应 用 ， 参 见 本 章 习 题 2 和 3. 
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图 3-2 反射 原理 的 示意 图 


证 ”考虑 一 个 从 A 到 也 且 在 : 轴 上 有 一 个 或 一 个 以 上 的 顶点 的 路 径 {s =a; 
2 一 外， 今 上 为 第 一 个 这 样 的 项 点 的 横 坐 标 〈 参 见 图 3- 2)， 也 就 是 说 : 选取 
i， 使 得 人 0，… 0 = 一 0， 因 此 ， { 一 Sopp att y Spy 9 Sp = Oy Sey S29 So) 
是 引导 A 到 B 的 路 径 ， 而 且 T= (7.0) 是 它 在 上 轴 上 的 第 一 个 顶点 ， 折 线 A 工 和 
AT 互 为 反射 ， 从 而 所 有 从 A 到 B 的 有 一 个 顶点 在 t 轴 ! 上 的 路 径 与 全 部 从 A 到 8B 的 
路 径 之 间 存 在 一 个 一 一 对 应 ， 这 就 证 明了 我 们 的 引 理 ， > 

作为 一 个 直接 的 推论 ， 我 们 证 明 例 〈a) 中 所 讨论 的 结果 .这 可 作为 这 一 章 全 部 
理论 的 出 发 点 . 


选举 定理 An fo x ARE ER. We AN, ERR A (nsx) 的 满足 条 件 


5, > 0,55, D0 的 路 径 Csitt sn = 2). 
证 显然， 合乎 定理 所 要 求 的 路 径 的 数目 与 从 (1,1 到 (n,x) 的 既 不 触 到 t- 
轴 又 不 越过 1- 轴 的 路 径 数 相 等 ， 由 前 述 引 理 得 知 ， 这 些 路 径 数 等 于 
NN (0 )—(* 0 ), 
此 处 pp 和 9g 如 (1.2) 式 所 定义 ， 用 惯用 的 算法 可 证 上 式 右 方 等 于 Nene TOD HO. 
定理 证 毕 . > 


3.2 ”随机 徘徊 的 苛 本 记号 及 概念 
我 们 将 要 用 理想 的 (或 均匀 的 ) 扔 硬币 的 博弈 来 描述 随机 徘徊 中 的 术语 、 随 机 
徘徊 具有 很 强 的 直观 魅力 并 易于 推广 ， 正 如 前 面 的 例子 所 解释 的 那样 ， 当 一 条 路 径 


Cattas) 代表 连续 扔 p 次 硬币 的 记录 时 ， 部 分 和 s,，… ,so 就 代表 连续 的 累积 获 利 . 
为 了 几何 描述 的 方便 ， 假 定 扔 硬币 是 匀速 进行 的 ， 因 此 ,第 nn 次 扔 硬币 发 牛 在 第 个 


1. 原 书 此 处 为 zx- 轴 ， 应 为 +- 轴 ， 原 作者 这 类 笔 误 ， 下 面 还 有 一 些 . 一 Ha 
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时 刻 (epoch)， 连 续 的 部 分 和 5; ，…，,s 将 作为 点 标记 在 垂直 的 zx- 轴 上 ， 称 它们 为 
“质点 ” 作 随 机 徘徊 时 所 处 的 位 置 ， 注意 质点 在 直线 上 每 次 都 只 移动 一 步 ， 向 上 或 向 
下 . 一 条 路 径 代 表 了 此 类 运动 的 一 个 纪录 . 例如， 图 3- 1 中 一 条 从 O 到 N 的 路 径 代 
表 了 一 个 走 了 6 步 的 从 原点 出 发 又 回 到 O 的 随机 徘徊 . 

每 一 条 长 为 e 的 路 径 可 以 解释 为 一 个 随机 徘徊 的 试验 的 一 个 结果 ， 共 有 2° 条 这 
样 的 路 径 ， 每 一 条 赋 概 2-*， GE 14 章 还 要 引进 另外 的 赋 概 方法 ， 为 了 与 其 他 的 区 别 
起 见 ， 现 在 的 随机 徘徊 称 为 对 称 的 . ) 

其 样本 空间 的 概率 已 经 确定 了 ， 但 是 由 于 数目 o 未 定 ， 所 以 仍 留 悬念 ， 为 了 看 出 
它 扮演 了 什么 角色 ， 让 我 们 考虑 路 径 经 过 点 〈2,2) 这 一 事件 ， 前 两 步 必须 是 正 的 ， 
而 且 这 种 路 径 共 有 2 所? 条 ， 因 此 如 不 考虑 o 的 数值 ， 此 事件 之 概率 为 1/4， 更 一 般 地 ， 
对 任意 一 个 ko。， 可 以 任意 限定 最 初 的 & 步 ， 而 且 恰 有 2 “条 路 径 满足 这 下 个 条 件 . 
由 此 推出 由 前 有 步 (kop) 决定 的 事件 的 概率 不 依赖 A, ERR, Sp 充分 
大 后 ， 它 并 不 起 什么 作用 . 换言之， 每 一 条 长 为 2 的 路 径 可 以 取 作 一 条 非常 长 的 路 
径 的 首 段 ， 并 且 不 需要 指明 后 面 一 段 的 长 度 .， 无论 从 形式 或 结果 来 看 ， 研 究 没 有 终 
点 的 试验 序列 是 非常 合适 的 ， 但 这 要 求 不 可 数 的 样本 空间 ， 因 此 ， 后 面 我 们 仅仅 要 
求 : 构成 样本 空间 的 路 径 的 长 度 o 大 于 在 我 们 的 公式 中 出 现 的 步 数 ， 除 此 以 外 ， 不 仅 
人 允许 而 且 乐 意 忘 掉 o. 

为 了 后 面 一 般 理论 的 需要 ， 引 进 一 些 记号 ， 用 Xi ,X;,… 表 第 1， 第 2 步 的 结果 ， 
Si ,S; ,… 表 质点 的 位 置 ， 于 是 

9 一 X 十 … 十 X,， 9 一 0. (2.1) 

从 每 一 条 路 径 ， 可 以 读 出 全 部 相应 的 X,, Xo - ATA. BEREX X; 是 路 径 的 
函数 :， 例 如 ， 对 图 3- 1 中 的 路 径 ，X 一 Xe 一 X 一 1，X 一 Xi 一 Xe 一 一 1. 

我 们 可 以 通过 加 条 件 于 和 S 上 把 全 部 事件 描述 出 来 ， 事件 “在 时 刻 %， 质 点 处 
于 位 置 ”可 以 表示 为 1{S,=”}， 记 它 的 概率 为 pa “用 流畅 的 语言 说 ， 在 时 刻 n 


SHE ro 从 原点 到 点 (n,r) 的 路 径 数 N. BAR 1.39) 所 给 出 ， 因 此 
ni 
Pan 5P {S,=r} = ntr] 2”. (2. 2) 
2 


此 处 ， 当 (nn 十 7)/2 不 是 0 到 ?之 间 的 整数 时 ， 二 项 式 系 数理 解 为 0. 
当 S, 二 0 时 ， 称 质点 在 时 刻 上 返回 到 原点 ， 此 处 上 必需 为 偶数 ， 而 且 当 有 ==2v 
时 ， 其 返回 原点 的 概率 为 pano. 因为 此 概率 经 常 出 现 ， 我 们 记 之 为 w,. A 


1. 根据 赖 尔 登 〈J. Riordan) 的 说 法 ，epoch 一 词 用 以 表示 时 间 轴 上 的 一 个 点 ， 本 书 用 epoch 一 词 想 以 
此 区 别 其 他 书 常用 的 表示 时 间 的 词 [诸如 (moment) 时 刻 、(time) 时 间 、(point) 点 」 数学 上 时 
间 一 词 用 以 表示 区 间或 时 段 ， 做 物理 实验 可 能 占用 时 间 ， 但 是 在 扔 硬币 的 试验 中 无 时 间 性 ， 本 书 仍 
以 人 们 常用 的 词汇 时 刻 来 对 应 epoch 一 词 . 

2. SAD 9 章 中 引进 的 术语 来 说 ，Z4 就 是 “随机 变量 
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— { 40\ o-z | 
w= ( )2 (2. 3) 
当 二 项 式 系 数 表示 为 一 些 因子 的 乘积 时 ， 由 第 2 章 公 式 (9.1) 直接 可 证 : 
1 
Uy no (2.4) 


此 处 ， 一 表示 当 veok} ERAPAZ EAF 1， 甚 至 当 v 适 度 大 时 ， 上 式 右 方 部 是 一 
MIER TREN. 
要 特别 注意 第 一 次 返回 原点 时 的 诸 项 .第 一 次 返回 原点 发 生 在 时 刻 2v 当 且 仅 当 
Si 天 0,……9， 1 天 0 但 9 一 0. i (2.5) 
记 此 事件 的 概率 为 fa. HEX fo =0. 
概率 fs, 与 us, 有 值得 关注 的 关联 ， 在 时 刻 2v 访问 原点 ， 可 能 是 第 一 次 ， 也 可 能 
第 一 次 访问 原点 在 2 二 2v 而 在 其 后 的 2v 一 2k 个 时 间 单 位 内 再 次 访问 原点 ， 由 于 有 
22 了 ,条 长 为 2k 的 终点 为 第 一 次 返回 原点 的 路 径 ， 有 2” “uz a 条 从 后 《2&,0) 到 
(2v,0) 的 路 径 。 因 此 
Uo, = fz oy T fa Uza T'E fouto vel, (2.6) 
(参见 3.10 节 习 题 5.) 
ESBE A£ (2.2) 并 没有 给 出 S 落 在 哪个 区 域 的 直接 线索 .此 问题 的 回答 要 借助 
于 正 态 逼近 ， 它 是 中 心 极限 定理 的 特例 ， 我 们 将 在 7. 2 节 中 证 明之 ， 
a<<S,<6 的 概率 ， 可 以 通过 把 概率 p,., 对 一 切 界 于 a 和 2 之 间 的 7 求 和 而 得 到 . 
为 此 ， 只 需 知道 一 切 形 如 下 面 的 不 等 式 Sa 的 概率 就 行 ， 这样 一 些 概率 可 以 以 下 
面 的 逼近 式 估计 出 来 : 对 一 切 zx， 当 ?一 cc 时 有 


PS > avn} > 1— NR (r) = 


= | ec dt, (2.7) 
此 处 四 是 7.1 节 中 所 定义 的 正 态 分 布 函数. 为 了 当前 的 目的 ， 我 们 并 不 对 其 性 质 特 
别 感 兴趣 ，(2. 7) 中 的 极限 存在 说 明了 一 个 重要 的 事实 : 对 于 大 的 n, S/Nn 的 概率 被 
同一 个 概率 所 控制 ， 因 此 ， 对 一 切 大 的 n,S,/Yn 可 以 用 同一 个 描 近 值 . 

表 3- 1 描述 了 S, 的 一 些 可 能 的 值 域 ， 在 第 7 章 表 7- 1 中 将 给 更 多 更 好 的 值 . 


表 3-1 S, 的 一 些 值 域 


P {S,>aVn)} 0. 159 0. 067 0. 023 0. 006 0. 001 


1. 对 真实 值 为 wi 0. 2461, HEWA 0. 2523, Xf uz = 0.1762, HBE A 0. 1784. 其 百 分 误差 
大 致 以 位 置 v 的 倒数 下 降 . 

2. 下 面 所 要 求 的 特殊 情形 ， 在 7. 2 节 中 单独 处 理 ， 它 不 涉及 一 般 的 二 项 式 分 布 . 证 明 是 简单 的 ， 可 以 
放 在 这 里 . 
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3.3 主要 引 理 


正如 我 们 已 见 到 的 ， 初 次 返回 原点 在 时 刻 2v 的 概率 ,由 (2.3) 所 给 出 .作为 
随机 徘徊 的 起 伏 理 论 的 开始 ， 就 给 出 一 个 惊人 的 事实 ， 几乎 所 有 的 公式 都 含有 此 概 
率 ， 此 事实 的 理由 之 一 是 基于 下 面 的 引 理 ， 它 的 重要 价值 一 是 由 于 它 本 身 的 作用 ， 
二 是 为 下 一 节 中 的 更 深刻 的 定理 提供 一 个 关键 的 技巧 . 

引 理 1 在 时 刻 2n 以 前 (人 金 2n) 从 未 返回 原点 的 概率 等 于 在 时 刻 2n 返回 原点 
的 概率 ， 用 符号 来 写 ， 即 是 

P{1S; 尖 0,…,S,， 40} =P(S,, 一 0) 一 好， (3.1) 

当然 ， 此 处 2 盖 0， 当 左边 的 事件 发 生 时 ， 或 者 所 有 的 S 都 是 正 的 ， 或 者 所 有 的 S 
都 是 负 的 ， 此 两 种 情况 是 等 可 能 的 ， 所 以 我 们 可 以 把 (3. 1) 重新 表示 为 : 


P(S, >05 Sn >0) = 5 tn (3. 2) 
证 ”考虑 S 所 可 能 取 的 一 切 值 ， 易 见 ; 
P:S; > 0 ……，9，， > 0} 一 >) PKS, > 0，……， Sop > 0, S, — 2r} (3. 3) 
=] 


ERUR ron MRA. BASE, 满足 右边 的 条 件 的 路 径 数 等 于 
Nori ~ Noni AM ERRAR ”项 等 于 
z (Peni ,2r—1 T Pen-1.2r+1 ). 


第 -项 负 部 与 第 > 十 1 项 正 部 正好 抵消 ， 于 是 〈3. 3) RPM ALS Poin BH 


证 Pon—1.1 T Uns’ 引 理 证 毕 . > 
此 引 理 可 用 多 种 方式 陈述 ， 例 如 
P{S, 20,°*,S),220} = t. (3. 4) 


确实 ， 一 条 2n 长 的 其 一 切 顶点 都 严格 地 在 zx- 轴 上 方 的 路 径 必 过 点 〈1,1)， 取 此 
点 做 新 的 原点 ， 可 得 到 一 条 长 为 2—1 的 其 一 切 顶 点 在 新 的 z- 轴 的 上 方 或 落 在 zx- 轴 
上 的 路 径 。 因 此 ， 


P(S >00, ,Sz > 0} == P{S 20, ;Szn-1 220} (3. 5) 


但 是 S,_, 是 一 个 奇数 ， 因 此 Sa: 20 蕴涵 了 S, >20, Am 3.5) 右边 的 概率 与 
(3.4) 中 的 概率 相等 ， 所 以 (3. 4) 成 立 ，( 参 见 3. 10 节 习 题 8.) 
引 理 1 直接 导出 初 返 原点 的 分 布 的 一 个 精确 表达 式 ， 说 “一 次 初 返 原 点 发 生 在 


1. 此 引 理 明显 地 来 自 母 函数 SD aS? 的 形式 ，[ 参 见 第 11 章 (3. 6) 式 ] 并 指出 过 其 重要 价值 ， 发 现 
它 的 重要 意义 是 最 近 的 事 ， 此 引 理 的 几何 证 明 可 参见 3. 10 节 习 题 7. 
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时 刻 2n” STi: “ZA 


9, 0 5°85, 
对 k=n—1 成立 但 对 k=n 不成立. ”由 (3.1) 这 意味 者 : 
Jon = Us,_2 — Wo, » n=1,2,°*. (3. 6) 
常规 计算 可 化 此 表达 式 为 : 
fn =z in. (3. 7) 
因此 ， 证 明了 了， 


引 理 2 初 返 原点 发 生 在 时 刻 2n 的 概率 由 〈3.6) 或 (3.7) 所 给 出 . 

由 (3.6) 推 知 Ath te =1l. 用 扔 硬币 的 术语 来 说 ， 只 要 游戏 进行 的 次 数 充 
分 多 ， 实 际 上 是 运气 均等 的 ， 除 了 进行 非常 多 次 的 游戏 偶然 会 出 现 意 外 以 外 ， 这 与 
直观 背景 是 符合 的 ， 例 如 ， 扔 100 次 硬币 ， 出 现 运气 不 均等 的 概率 大 约 为 0. 08. 
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现在 ， 为 随机 徘徊 中 的 随机 起 伏 的 性 质 的 分 析 作 一 点 准备 ， 结 果 是 令 人 震惊 的 . 
根据 被 众人 所 信服 的 所 谓 平均 原理 ， 在 一 个 很 长 的 扔 硬币 的 游戏 中 ， 每 一 个 游戏 者 
居 胜 方 的 次 数 大 约 贞 一 半 ， 且 领先 不 会 经 常 由 一 方 转 到 另 一 方 . 因此 ， 想 像 有 一 个 
很 大 的 样本 ， 它 是 由 多 个 扔 均匀 硬币 的 游戏 的 记录 所 构成 ， 而 且 每 一 次 游戏 都 扔 27 
次 硬币 ， 我 们 随机 地 选取 一 个 ， 观 察 它 最 后 一 次 平局 AD REBRA KS 
之 ， 即 最 后 一 次 使 “累积 成 功 次 数 等 于 累积 失败 次 数 ” 的 那 一 次 试验 的 次 数 )， 此 数 
必 为 偶数 ， 记 之 为 2k( 所 以 上 志 n)， 领 先 经 常 变化 蕴涵 了 相对 地 很 接近 mn， 但 这 是 
不 对 的 .确实 ， 下 一 个 定理 揭示 了 一 个 令 人 吃惊 的 事实 : k 的 分 布 是 对 称 的 ， 即 是 
取 某 个 值 的 概率 与 n 一 k 取 此 值 的 概率 是 一 样 的 ， 特 别 地 ， 此 对 称 性 蕴涵 了 : 不 等 式 
k>n/2 5 k <n/2 的 可 能 性 是 差不多 的 !， 如 果 不 考 虑 游戏 的 长 度 ， 和 局 发 生 在 游戏 
的 下 半 段 的 概率 为 1/2， 而 且 靠 近 于 终点 的 概率 最 大 . & 有 最 可 能 取 的 值 是 两 个 极 问 ， 
即 是 0 或 这 些 结果 说 明 ;， 直观 对 随机 起 伏 造 成 的 影响 产生 了 错觉 下面 几 个 数值 
的 结果 将 要 说 明 这 一 点 . 

Gil (a) 假 定 有 很 多 个 扔 硬币 的 游戏 在 统一 的 指挥 下 同时 进行 ， 规 定 每 秒 钟 进行 
一 次 ， 而 且 日 夜 不 休止 地 进行 一 整 年 .平均 来 说 ， 从 10 场 游戏 中 抽取 1 场 ， 最 后 一 
次 和 局 发 生 在 第 9 天 以 前 ， 而 且 在 此 后 的 356 天 中 领先 不 再 发 生变 化 ; 从 20 场 中 机 


取 1 场 ， 最 后 一 次 和 局 出 现在 2 RUN; 从 100 场 中 抽取 1 场 ， 最 后 一 次 和 局 出 现 
在 2 小 时 10 分 钟 以 内 . 


1. 的 分 布 的 对 称 性 ， 是 由 计算 机 实验 模拟 所 发 现 的 ， 而 且 是 在 不 知 & 的 确切 分 布 4.1) 以 前 ， 理 
论 也 证 明了 的 分 布 的 对 称 性 .参见 [25]. 
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(b) 假 定 在 一 个 为 期 一 年 的 教育 实验 中 ， 有 一 个 小 孩 除 了 第 一 个 星期 以 外 ， 功 课 
一 直 落 后 ， 而 男 一 个 小 孩 ， 除 了 最 后 一 个 星期 以 外 ， 功 课 一 直 领 先 ， 我 们 能 否 判 定 
这 两 个 小 孩 的 能 力 是 一 样 的 ? 还 有 ， 将 11 个 小 孩 送 到 一 个 教育 机 构 进 行 学 习 ， 不 赁 
才智 而 仅仅 是 随机 选取 .这 11 个 小 孩 中 有 一 个 除了 某 一 周 以 外 ， 他 在 全 组 是 学 习 领 
先 的 ， 另 一 个 除了 某 一 周 以 外 ， 他 在 全 组 是 最 落后 的 ， 

k 的 可 能 值 的 确切 的 概率 由 下 述 定 理 给 出 : 

定理 1 (最 后 访问 的 反正 弦 律 ) 在 时 刻 2n 以 前 E 2m 最 后 一 次 访问 原点 的 
时 刻 在 2k 的 概率 为 : 

Qop. on  UopU ol, k=0, l; te’ n, (4.1) 

证 ”考虑 满足 下 述 条 件 的 路 径 : Sp, =0, 但 Sa A0.7,S,, 40. 其 前 28 个 顶点 
可 以 有 22#xx 种 不 同 的 选 法 . 取 (2&,0) 作 新 原点 并 用 G.D 我 们 发 现 : 后 面 (2n 一 
2k) 个 顶点 有 2° Pun 种 不 同 的 选 法 . 除 以 2 可 得 〈4. 1). > 

由 此 定理 得 知 ， 把 数 (4. 1〉 对 有 求 和 和 为 1， 赋 权 ao T 2k 上 的 概率 分 布 称 
ZA n 阶 的 离散 的 反正 弦 律 ， 因 为 反正 弦 削 数 对 它 提供 了 一 ne 此 分 


布 是 对 称 的 ， 因为 Ak, on Qm 2k, 2n" 对 n=2, HoMAN=. <, = ; 对 7 一 10， 参见 
表 3-2. 中心 项 总 是 最 小 . 
表 3-2 10 阶 的 反正 弦 分 布 


k=0 k=] 加 
k=10 k=9 
2k 20 0. 1762 0. 0927 0. 0736 0. 0617 0. 0606 


下 述 函 数 给 出 了 反正 弦 分 布 的 主要 性 质 一 个 很 好 的 解释 ， 
1 


一 一 一 一 一 一 一 一 OLA]. (4. 2) 
fla) a) x 
由 斯 特 林 公 式 知 : 除了 nn 很 小 以 外 ，wz 很 接近 1/ van, KAM SBS: 
got f(x) $ ma. (4, 3) 


BET bE O N n WO, REBUY. ASTRA f(x), KAU a 为 
中 心 的 长 为 1/ 的 区 间 构 成 的 矩形 的 面积 〈 参 见 图 3- 3)， 对 于 O<p<q<l 和 大 的 
n， 满 足 pn<k<qn 的 概率 aan MAET S BEE TEAME p <r <a EE 
的 面积 ， 对 于 p=0 和 q=1 的 剩 下 的 情况 也 对 ， 因 为 图 形 下 面 的 总 面积 和 一 切 one, 
之 和 都 是 1， 幸好 ，(4.2) 可 以 精确 积分 ， 因 此 ， 对 固定 的 0 二 之 1 和 充分 大 的 并 
渐 近 地 有 : 


>) az. 4 4 are sin yz. (4.4) 
kem ne 


62 "BSE 扔 硬币 的 起 伏 问 题 和 随机 徘徊 


| | 


| | 
| | 
0.1 02 0.3 0.4 0.5 0.6 0.7 0.8 0.9 1.0 


l 
yy rí l-r) 


注意 ， 右边 不 依赖 wn， 这 意味 着 对 大 阶 数 的 反正 弦 分 布 ， 表 3- 3 都 对 . (实际 上 对 相 
对 小 的 n， 通 近 也 很 好 . ) / 


图 3-3 f(x) 二 的 图 形 ,其 结构 解释 (4. DREN 


表 3-3 ”连续 的 反正 弦 分 布 : A(x) =are sin x 


: Aw z AG) 

0. 00 0. 090 QO. 20 Q. 295 Q. 40 0. 236 

0.01 0. 064 0. 21 0. 303 0. 41 0. 442 

0. 02 0. 090 0. 22 0. 311 0. 42 0. 449 

0. 03 0. 111 0.23 0.318 Q. 43 0. 455 

0. O4 0.128 0. 24 0. 326 0. 44 0. 462 

0. 05 0. 144 0. 25 0. 333 0. 45 0. 468 

0. 06 0, 158 0. 26 0. 341 0. 46 0. 474 

0. 07 QO. 171 0. 27 0. 348 0. 47 0. 481 

0. 08 0., 183 0. 28 0. 355 0. 48 0. 487 

0. 09 0, 194 0. 29 0. 362 0. 49 0. 494 
0. 50 0. 500 

0. 10 0, 205 0. Q. 

0. il 0. 215 0. Q. 

0. 12 0. 229 Q. 0. 

0. 13 0. 235 O. Q. 

0. 14 0. 244 Q. OQ. 

0. 15 0. 253 0. 0. 

0. 16 0. 262 Ò. Q. 

0. 17 0. 271 Q. Q. 

0.18 0. 279 Q. 0. 

0. 19 0. 287 0. Q. 


对 i> ,利用 A(l 一 x} 二 1 一 A(x). 


rt ttt 
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我 们 发 现 ， 与 人 们 第 见 的 想法 相反 ， 在 一 个 很 长 的 扔 便 币 的 游戏 中 ， 一 方 几 乎 
在 全 过 程 中 处 胜 方 ， 而 另 一 方 处 败 方 . 下 一 个 定理 将 要 前 明 :， 同样 一 个 现象 ， 不 过 
用 的 方法 是 对 质点 落 在 正 的 一 边 的 时 间 与 总 时 间 的 分 数 的 分 析 ， 人 们 直观 党 得 这 个 


分 数 非常 接近 丁 亏 ， 然 而 反面 结论 才 是 正确 的 ， 接 近 志 的 可 能 性 最 小 ， 反 而 =0 或 


n 这 两 种 极端 情况 的 可 能 性 最 大 .， 由 于 定理 再 一 次 包含 了 离散 的 反正 弦 分 布 (4.1) 
(在 第 8 节 中 还 要 出 现 两 次 以 上 )， 所 以 其 分 析 是 简明 的 ， 

定理 2 〔〈 占 位 时 的 离散 的 反正 弦 律 ) 在 0 到 2n 的 时 间 区 间 中 ， 质 点 处 于 正方 2k 
个 时 间 音 位， 处 于 负 方 2n 一 2k 个 时 间 单 位 的 概 举 为 和 

(处 在 正方 的 总 时 间 必 人 须 是 偶数 . ) 

推论 ! 给 定 0 二 x 二 1， 当 n 一 co 时 ， 质 点 处 于 正方 的 时 间 单 位 小 于 等 于 xn 而 处 


于 负 方 的 时 间 单 位 大 于 等 于 (1 一 x)n 的 概率 趋 于 和 arc sin Vx. 


例 (OMS 3-2 中 可 看 出 : 在 20 次 抛掷 中 ， 领 先 从 未 从 一 方 转 到 另 一 方 的 
概率 大 约 为 0. 352， 幸 运 的 游戏 者 领先 次 数 大 于 或 等 于 16 的 概率 为 0.685， (S 
x+ 二 4/5 时 ， 从 推论 所 获得 的 近似 值 是 0.590.) 每 个 游戏 者 都 领先 10 次 的 概率 只 
有 0.06. 

(A) HR n (BC. 质点 处 于 原点 同一 边 的 时 间 占 97.6% 的 概率 为 0.20， 从 10 个 个 
例 中 取出 一 个 ， 质点 有 99. 4% 的 时 间 处 在 同一 边 . 

(e) 在 例 (a) 中 ， 每 秒 钟 扔 一 次 硬币 ， 一 直 扔 365 天 ， 下 列 附 表 给 出 了 : 一 个 不 
走运 的 游戏 者 ， 以 概率 p 使 其 领先 的 总 时 间 小 于 t，. 


P Ép P tp 
0.9 153.95 天 0.3 19.89 天 
0.8 126. 10% 0.2 8.93 天 
Q. 7 99.65 天 0.1 2.24 天 
0.6 75.23% 0. 05 13.5 小 时 
0.5 53.45% 0. 02 2.16 小 时 
0. 4 34.85 天 0. O1 32.4 分钟 


> 
定理 2 的 证 明 ”考虑 固定 长 度 为 2n 的 路 径 并 令 bn, RRRA 2k 条 边 在 t- 轴 上 


1. FIFE (Paul Lévy) [Sur certains processus stochastiques homegenes , Compositia Mathematica, VoL 7 (1939), 
pp. 283—339] 找到 了 布朗 运动 的 反正 弦 律 ， 而 且 也 联系 了 扔 硬币 的 游戏 ， 关 于 相互 独立 的 随机 变量 序列 
的 正 部 分 和 的 个 数 的 更 一 般 的 反正 弦 极 限 律 是 由 厄 尔 多 斯 《P. Erdos) 和 卡 克 (M Kac) 所 证 明 的 LOL 
Pall. Amer, Math. Soc. ,Vol 53(1947), pp. 1011 一 1020]， 当 时 ， 反 正弦 极限 律 的 广泛 应 用 是 不 可 思议 的 . 
当 安德森 (S, P, Anderson) 惊人 地 发 现 ， 相互 独立 的 随机 变量 的 和 的 起 伏 理论 的 许多 方面 都 有 纯 组 人 台 的 
特性 时 ， 他 把 整个 理论 进行 了 改造 ，「 见 ， Mathematica Scandinavica, Vol. 1(1953), pp. 263 一 285 和 Vol. 2 
(1954),pp, 195 一 223. ] 原始 证 明 很 复杂 ， 但 他 们 打开 了 新 的 研究 道路 ， 现 已 变 得 颇 简 单 了 ， 定 理 2 最 初 
由 钟 开 莱 与 费 勒 用 复杂 的 方法 证 明 的 ，[ 见 本 书 第 一 版 第 12 章 第 5- 6 节 , 」 定理 1 是 新 的 . 
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方 的 概率 ， 我 们 要 证 明 
Dok, 2u 一 CQok,2u。 (4.5) 
HH (3.4) Fl bz 一 xs， 利用 对 称 性 也 有 boun Aik, REX 1 委 & 委 v 一 1 来 证 
明 〈4.5) 就 够 了 . 
假定 在 22 个 时 间 单 位 中 ， 恰 有 2 个 时 间 单 位 落 于 正方 ，1kv 一 1， 在 此 情况 
下 ， 初 返 原 点 的 日 期 必 发 生 在 某 一 日 期 2r 二 2n， 而 且 还 有 两 种 可 能 . 第 一 ， 直 到 初 
返 原点 的 2r 个 时 间 单 位 以 前 都 在 正 的 一 边 ， 在 这 种 情况 下 ，r 入 & 委 ?一 1 而 且 此 路 径 
在 顶点 (2r.0) 以 后 的 那 一 段 还 有 2k—2r 个 边 在 坐标 轴 的 上 方 ， 显 然 这 类 有 路径 的 总 


BONS e fa e be 2,-2,， 另 一 种 可 能 是 ， 到 初 返 原点 以 前 的 2r 个 时 间 单 位 以 
前 都 在 负 的 一 边 ， 在 这 种 情况 下 ， 此 路 径 在 顶点 (2r,0〉 以 后 的 那 一 段 恰 有 2k 个 边 
在 坐标 轴 的 上 面 ， 由 此 一 > 之 上 这 类 路 径 的 总 数 为 ， 元 2x72 t baa Bt 
K IKin l 时 : 

Doron = LY Sobre ran + LŠS bus (4. 6) 


现在 用 归纳 法 来 证 明 (4.5)， 当 w==1 时 (4.5) 显然 成 立 ， ee (4.5) 对 v<n—-1 
W. M (4.6) 化 为 : 


] Å l n—k 
Dox an = F Urk > Jorr F F Ure >, Forth 2n-2k-2r (4. 7) 
2 r=] 2 r=] 


由 (2.6) 知 第 一 个 和 等 于 us， 而 第 二 个 和 等 于 un BE. 5) 对 v=n ERA. P 
[关于 反正 弦 律 的 一 个 似是而非 的 结果 含 于 第 14. 9 市 习题 4. | 


3.5 符号 变换 


随机 起 伏 的 理论 研究 ， 使 我 们 过 到 许多 似是而非 的 东西 . 例如， 人们 目 然 地 期 
A, 在 一 次 长 时 间 的 扔 硬币 的 游戏 中 ,领先 的 变化 次 数 应 粗略 地 与 游戏 时 间 的 增加 
而 成 比例 地 增加 .在 一 个 游戏 中 ， 如 果 时 间 延 长 至 二 倍 ， 通 常人 们 会 认为 游戏 的 一 
方 领先 的 次 数 也 增 至 二 倍 ， 但 这 是 错误 的 . 我们 将 要 精确 地 证 明 : nr 次 试验 中 领先 变 
化 的 次 数 的 增加 仅 随 而 变 ， 在 100n 次 试验 中 ， 人 们 只 能 期 望 : 领先 变 化 的 次 数 约 
10 倍 于 nn 次 试验 中 领先 的 变化 次 数 ， 这 再 一 次 证 明 : 界 于 两 次 和 局 之 间 的 等 符 时 间 
是 很 长 的 . 

再 转 而 用 随机 徘徊 的 术语 ， 说 一 次 符号 变换 发 生 在 时 刻 n， 如 果 SAMS. RA 
相反 的 符号 ， 即 是 说 ， 路 径 穿越 坐标 轴 ， 在 这 种 情况 下 ，S, 二 0， 因 此 ，n 必须 是 偶 
CER) 整数 . 


x 此 节 在 后 面 并 不 明显 地 引用 . 
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定理 1 直到 时 刻 272 十 1 为 止 符号 变换 的 次 数 恰 为 了 的 概率 El 等 于 

2 Ponin AEZ, 
E ont) SLP {Son m2r, r=0,1,*., (5.1) 

iE 首先， 我 们 把 定理 表述 成 一 个 更 为 方便 的 形式 . 如 果 第 一 步 走 到 点 (1,1)， 
就 取 此 点 为 新 的 坐标 系 的 原点 .一 次 穿越 旧 坐 标 系 的 横 轴 ， 对 应 于 一 次 穿越 新 坐标 
系 的 横 轴 下 面 的 一 条 水 平 线 〈 纵 坐 轴 为 一 1)， 类 似 的 推导 对 S = 二 一 1 亦 可 应 用 . 由 此 
可 知 定理 完全 等 价 于 下 面 的 命题 ， 直 到 日 期 2 为止， 穿越 水 平 线 一 1 的 次 数 恰 为 
的 概率 等 于 Z Pont 1,2r+ . 

首先 考虑 r= 二 0 的 情况 ， 说 水 平 线 一 1 从 未 被 穿越 等 价 于 说 水 平 线 一 2 AR A ik 
及 (或 穿越 )， 在 这 种 情况 下 ，S:, 是 一 个 非 负 的 偶 整 数 . MRO, AA 1 市 的 基本 
反射 引 理 知 : 从 (0,0) 到 (2n,2k) 且 一 定 触 及 水 平 线 一 2 的 路 径 数 等 于 到 (2n， 
2k 十 4) WOR. Ak, BIA T A (2n,2k) 但 从 未 触及 水 平 线 一 2 ERE Ponz 
— Pop opty. 水平 线 一 2 从 未 被 触及 的 概率 等 于 这 些 数 对 有 二 0,1,2,… 求 和 ， 许 多 项 被 
HURT. BURRS, WBE pno tpn 虽然， 每 一 条 经 过 (2n 十 1,1)〉 的 路 径 
或 者 经 过 (2n,0) 或 者 经 过 (2n,2), A 


] . 
Peria = Pano 十 Ponz)» (5. 2) 


h (5.2) Mr=ONM, RTH S. 

Bee r=1 的 情形 ， 一 条 在 时 刻 20-1 穿越 水 平 线 一 1 的 路 径 可 以 分 成 两 段 ， 
一 段 从 (0.0) 到 〈20, 一 2) ， 而 另 一 段 为 从 (2u,—-2) 开始 的 长 为 2n— 2v 的 子路 径 . 
对 后 这 一 段 我 们 应 用 r 二 0 时 已 得 到 的 结果 但 是 对 正 、 负 号 的 角色 易 位 . 长 为 2n 一 2 
的 始 于 点 (2wv, 一 2) 的 从 不 穿越 水 平 线 一 1 的 路 径 的 总 条 数 等 于 从 (2v, 一 2) 到 
(2n 十 1, 一 3) 的 路 径 的 总 条 数 ， 但 是 每 一 条 这 种 路 径 与 最 初 的 那 一 段 一 起 组 成 了 一 条 
从 (0,0) 到 (2x 十 1, 一 3) 的 路 径 . 由 此 推出 : 长 为 2n 的 恰巧 穿越 水 平 线 一 1 一 次 
的 路 径 总 数 等 于 从 原点 到 (2n 十 1, 一 3) 的 路 径 数 ， 即 是 2 pig. AWEH T 
r 一 1 时 我 们 的 论断 也 成 立 . 

用 归纳 法 可 以 证 明 对 任何 > 命题 都 成 立 ， 证 明 中 的 第 一 部 分 的 推理 不 需要 作 任 何 
改变 、，( 第 二 部 分 只 对 += 二 1 这 一 特殊 情况 来 论述 ， 不 过 为 了 避免 复杂 的 符号 而 已 .) > 

作为 定理 的 一 个 明显 的 推论 : n 次 试验 中 符号 变换 恰 为 r 次 的 概率 &,, 是 r 的 下 
降 函 数 : 

on bin en N (9. 3) 

这 意味 着 ， 不 考虑 扔 硬币 次 数 ,“ 领 先 从 不 改变 ”这 一 事件 的 可 能 性 大 于 “领先 
改变 下 次 ”的 可 能 性 ， 这 里 有 可 以 是 事先 给 定 的 任 一 正 整数 . 

例 (a)99 次 试验 中 符号 恰巧 改变 > 次 的 概率 z, 如 下 表 : 


1. 对 于 返回 原点 的 类 似 定理 ， 参 见习 题 9 一 10.， 对 另外 一 种 证 明 ， 见 习题 11. 
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r Ey r £r 

0 0. 1592 T 0. 0517 
1 0. 1529 8 0. 0375 
2 0. 1412 9 0. 0260 
3 0.1292 10 0. 0174 
4 0. 1066 11 0.0111 
9 0. 0873 12 0. 0068 
6 0. 0686 13 0. 0040 


(b) 10 000 次 试验 中 符 导 从 不 改变 的 概率 大 约 为 0.0160， 人 恰巧 改变 > 次 符号 的 
概率 zx, 下 降 得 很 慢 ， 对 于 r 王 10,20,30， 对 应 的 概率 x, =0. 0156,0. 0146,0. 0130. 在 
10 000 次 试验 中 领先 的 变化 次 数 不 超 过 10 次 的 概率 约 为 0.1740:， 换 言 之 ， 在 6 个 这 
样 的 试验 序列 中 就 有 1 个 ， 出 现 领 先 的 变化 次 数 不 超过 10. > 

FA (5.1) 的 一 个 有 用 的 性 质 是 : 它 使 我 们 能 应 用 第 2 EW IEA. Bez 是 固 
ERER n RK. ERA n 以 前 ， 符 号 的 变化 次 数 小 于 x Vn 的 概率 为 2P{S, 二 2xvn}， 再 用 


(2.7) 式 ， 后 面 的 概率 当 noone FN (2z) 一 方 ， 因 此 有 下 面 的 定理 : 


定理 2 (LAM) 在 时 刻 n 以 前 ， 符 号 变化 的 次 数 小 于 x Vn 的 概率 当 n 一 co 时 趋 于 
2R(27zx)—1. 

由 此 推出 : 符号 变化 的 次 数 的 中 位 数 约 为 0.337Yn， 意 即 ， 当 充分 大 时 ， 符 号 变化 的 
次 数 小 于 0. 337 Yn 与 次 数 大 于 0. 337 Yn 的 可 能 性 差不多 .符号 变化 的 次 数 小 于 0. 0628 Yn 的 概 


pyl a 
RAE, gp. 


3.6 — ANK I H e PH 


图 3- 4 是 扔 10 000 次 硬币 ,计算 机 实验 获得 的 结果 .同样 的 材料 已 经 在 第 1 草 
1.6 节 例 (c) 中 表述 了 ， 图 3- 4 顶 上 一 行 标 出 了 最 初 500 次 试验 的 结 末 ， 而 下 面 两 
行 标 出 了 全 体 10 000 次 体验 的 结果 ,但 此 两 行 横 坐 标 与 项 上 一 行 的 横 坐 标的 比例 太 
度 变 为 1 : 10， 纵 坐标 的 比例 尺度 不 变 . 

一 看 此 图 ， 许 多 人 会 对 接连 两 次 穿越 坐标 轴 之 间 的 区 间 的 长 度 而 尺 奇 ， 事实 上 ， 
此 图 形 提供 的 还 是 一 个 比较 平和 的 个 例 ， 它 是 从 三 个 记录 中 选 出 的 一 个 较 平 和 者 . 
如 果 把 此 图 反 向 看 ， 即 把 10 000 次 扔 硬币 的 实际 的 结果 颐 倒 一 下 《参见 3. 8 他 )， 会 
得 到 一 个 更 加 令 人 惊奇 的 例子 .理论 上 讲 ， 图 示 的 序列 与 反 回 的 序列 同样 是 一 个 理 
想 的 随机 徘徊 的 真实 的 表示 . 反 向 的 随机 徘徊 具有 下 述 性 质 ， 从 原点 出 友 ， 


1. 原 书 此 处 为 0.0174， 应 为 0. 1740， 一 -一 译 者 注 
2. 在 10 000 次 试验 至 多 出 现 6 OREM BTID 1/10 这 是 一 个 低估 值 ， 精 确 值 为 0, 112. 
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一 个 实验 的 说 明 


3.6 
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路 径 落 在 

负 的 一 边 正 的 一 边 
最 初 那 7804 46 后 面 的 84 
后 而 的 2 步 后 面 的 54 步 
后 面 的 ”30 步 后 面 的 2 步 
后 面 的 ”48 步 后 面 的 6 步 
后 面 的 2046 步 

总 共 9930 步 总 共 70 步 
时 间 份 额 ，0. 993 时 间 份 额 : 0. 007 


ARATE. 9410 000 次 均匀 的 硬币 ， 游 戏 者 一 方 胜出 次 数 超过 9 930 次 而 
另 一 方 不 到 70 次 的 概率 大 于 1/10， 换 言 之 ， 从 平均 意义 上 看 ，10 次 纪录 中 有 1 次 结 
果 与 人 们 期 望 的 结果 不 符 ， 反 过 来 ， 平 衡 性 比 图 3- 4 好 的 概率 只 有 0.072. 

3-4 的 原始 纪录 含有 78 次 改变 符号 和 另外 64 WOKE. Rm MPa A 8 
次 改变 符号 和 另外 6 次 返回 原点 .专家 意见 的 抽样 调查 显示 : 即使 是 训练 有 订 的 统 
计 学 家 ， 都 期 望 在 扔 10 000 次 均匀 硬币 时 ， 符 号 改变 的 次 数 大 于 78， 而 没有 人 期 望 
其 仅 为 8， 实际 上 ， 符 号 改变 的 次 数 不 超过 8 的 概率 大 于 0. 14， 而 符号 改变 的 次 数 超 
过 78 的 概率 约 为 0.12， 由 于 符号 改变 的 次 数 涉及 同一 个 标准 的 两 个 记录 ， 理 论 上 说 
不 应 引起 惊奇 ， 如 果 他 们 觉得 奇怪 ， 那 是 由 于 错误 的 直观 ， 和 过 多 地 参考 『 了 许多 官 
糊 的 索引 及 对 “平均 律 ”的 运 解 . 


3.7 ”最 大 和 初 过 


前 面 许 多 结论 都 是 基于 反射 原理 的 一 个 简单 推论 一 一 基本 引 理 3. 1 之 上 的 . 现 
在 ， 我 们 把 注意 力 转 到 此 原理 的 另 一 个 结 采 . 

考虑 完 一 直 留 在 z- 轴 上 方 的 路 径 以 后 ， 现 在 来 考虑 一 直 留 在 直线 =r 以 下 的 路 
径 ， 即 是 满足 下 列 条 件 的 路 径 : 

S,<r, Sr,S,<r. (7. 1) 

在 此 情况 下 ， 我 们 说 路 径 的 最 大 值 小 于 r，( 注 意 ; AAS =0, MURA REE 
的 . ) 2 A= (及 是 一 个 满足 坐标 Er 的 点 ， 称 从 0 到 A 的 一 条 路 径 触 及 或 超过 直线 
r=r, MAE (7.1) 不成立， 由 反射 原理 ， 这 样 的 路 径 的 总 数 等 于 从 原点 到 点 A 二 
(n,27 一 上 的 路 径 的 总 数 ， 其 中 A 是 A 关于 直线 c= 的 反射 因此， 我 们 证 明了 . 

引 理 1 Akr Ak A nhi, HAEA AS, k) 且 最 大 值 之 r 的 概率 
FF bao- = PS, =2r—k}. | 

最 大 值 等 于 > 的 概率 由 差 pur ;一 p21s 所 给 出 对 一 切 kr RA, BIE — 
条 长 为 n 的 路 径 其 最 大 值 恰 为 r 的 概率 ， 此 和 是 依次 至 进 的 且 最 后 化 为 六 .十 访 .- 
只 有 当 n 和 7 的 奇偶 性 一 样 时 ，p,, 才 不 为 0， 而 这 时 必 有 pi1 二 0， 于 是 我 们 得 
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到 了 : 
定理 1 一 条 长 为 n 的 路 径 ， 其 最 大 值 等 于 + 之 0 的 概率 是 数 对 (p,,, Parr) PH 
那个 正 数 . 
对 r 二 0 日 路 径 长 是 侦 数 时 ， 结 论 为 
P{S 0,S, 0, I, 0) =,,, (7.2) 
当然 ， 这 等 价 于 关系 式 〈3.4)， 它 代表 基本 引 理 的 一 种 版 本 . 因此， 和 定理 1 是 基本 引 
理 的 推广 . 
下 面 要 引进 一 个 在 随机 过 程 一 般 理 论 中 十 分 重要 的 基本 概念 ， 称 在 时 刻 n“ 初 
wt” Ar>o, wR 
Sirs, S, <r, S,=r. (7.3) 
在 现在 的 内 容 里 ， 或 许 说 “ 初 访 ” 比 “ 初 过 ”好 ， 但 是 术语 “ 初 过 ”在 物理 文献 中 
星 就 引进 并 应 用 了 ， 而 且 术 语 “ 访 问 ” 在 连续 过 程 中 是 不 能 米 用 的 . 
显然 ,一 条 满足 条 件 (7. 3) 的 路 径 必须 经 过 (n 一 1,r 一 1)， 而 且 在 时 刻 n 一 1 以 
前 “〈 含 "一 1) 其 最 大 值 为 r 一 1， 我 们 已 知 此 事件 的 概率 为 p,_1. 1 一 p14+1， 因 此 
得 到 
定理 2 初 过 rr 发生 在 时 刻 ? 的 概率 gp, 由 下 式 给 出 : 


Pron => LP trl — Pril d: (7. 4) 
ri 
ei 7 , (7.5) 


[ 跟 通常 一 样 ， 当 2 二 不 是 整数 时 ， ar T 0. ] 另 一 推导 见 3.8 节 Cb). 
2 


当 y 很 大 时 ,分布 (7.5) 非常 有 趣 、 为 了 得 到 初 过 -~ 发 生 在 时 刻 N 以 前 的 概率 ， 必 须 把 
OX n SNRA. FE AGATA (2.7) say Al, 仅仅 是 这 样 一 些 项 对 和 才 提 供 有 意义 的 
数值 ， 寻 /2， 既 不 很 大 又 不 是 很 靠近 于 0， 对 于 这 样 的 项 ， 第 7. 2 节 提 供 了 下 述 近 似 佑 计 : 


2 r — 2 19 
~a fo men (7.6) 
rn x Jah 


记 住 ， 在 和 式 中 ，n 和 vr 必须 有 相同 的 奇偶 性 .此 和 式 是 (7.7)” 中 的 积分 的 黎 曼 《Riemann) 
和 .我 们 得 到 
定理 3 ( 初 过 的 极限 定理 )， 固 定 t。， 初 过 rr 发 生 在 时 刻 tr* 的 概率 当 rooi T: 


[er ds = ?| 1 -a(7 ) | (7.7) 


1. (7.7) EPR MEREN. ER 3 的 推广 ， 参 见 第 14. 9 节 习题 M. 
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HOR NAA TL PRL ERD, 
粗略 地 说 ， 此 定理 推出 ; 初 过 -的 等 待 时 间 依 Amm. dr HAE CEM I 


以 后 的 概率 约 为 款 ， 由 此 推出 : 必定 存在 一 个 点 ke<<r， 使 得 经 过 & 到 & 十 1 的 时 间 长 于 从 0 到 


k Pir Ra BYAT fB]. 

初 过 时 刻 的 分 布 直接 导出 : 质点 第 -次 返回 原点 的 时 刻 的 分 布 . 

定理 4 第 r 次 返回 原点 发 生 在 时 刻 n 的 概率 为 or， 其 中 rr 由 (7.5) 式 所 
定义 ， 

换 句 话说 ， 在 时 刻 n 第 r 次 返回 原点 的 概率 与 在 时 刻 n 一 r 初 过 7 的 概率 一 样 . 

证 ! 考虑 一 条 从 原点 到 (n,0) 的 满足 下 述 条 件 的 路 径 : 其 所 有 的 边 都 在 横 坐 
FE., MERA ”一 1 个 内 顶点 在 横 坐 标 轴 上 ， 为 简单 起 见 ， 称 这 样 的 路 径 为 典 
型 的 〈representative)， (图 3- 5 给 出 了 一 条 n=20,r=5 的 典型 路 径 .) 一 条 典型 路 
径 可 分 成 > 段 ， 其 中 每 一 段 的 端点 都 在 横 坐 标 轴 上 ， 而 且 还 可 以 用 和 下列 办 法 构造 出 
2 条 不 同 的 路 径 ， 在 每 段 中 把 其 顶点 赋 以 不 同 的 符号 〈 即 是 说 ， 把 几 段 对 坐标 轴 作 
反射 )， 用 这 种 办 法 ,我们 可 以 得 到 一 切 在 第 > 次 返回 作为 结束 的 路 径 ， 因 此 ， 典 
型 路 径 的 条 数 与 在 第 r 次 返回 (在 时 刻 n) 为 结束 的 路 径 的 条 数 的 2 倍 相 等 ， 所 
以 ， 定 理 可 以 重新 叙述 如 下 : 长 度 为 的 典型 路 径 的 条 数 等 于 长 度 为 n 一 r WAR 
初 过 + 的 路 径 的 条 数 ， 这 确 是 对 的 ， 因 为 ， 当 我 们 把 一 条 典型 的 路 径 删 去 其 左 端点 
在 横 坐 标 轴 上 的 -条 边 以 后 ， 就 得 到 了 一 条 长 度 为 ”一 ”的 终点 初 过 > 的 路 径 ， 此 程 
序 可 反 向 施行 ， 即 在 原点 和 造成 初 过 1,2,…,r 一 1 的 那 r 一 1 个 顶点 插入 r RAR A 
斜率 的 边 〈 见 图 3-5). 


`W / 
~、 IN / 
bd Vv 


图 3-5 ” 初 过 和 返回 原点 的 解释 


由 此 推出 的 结论 是 : 初 返 的 极限 定理 也 可 以 应 用 到 第 ~ 次 返回 为 > 一 ce 时 的 场 
合 ， 第 了 次 返回 原点 发 生 在 时 刻 好 ”以 前 的 概率 当 r->co 时 趋 于 (7.7) 和 式 所 确定 


L 至 于 用 母 函 数 来 证 明 此 定理 ， 参 见 第 11 章 3.17) 


3.8 ”对偶 性 。 最 大 的 位 置 71 


此 和 拷打 揭示 出 随机 徘徊 中 的 随机 起 伏 的 夯 一 个 人 们 想像 不 到 的 性 质 ， 用 比较 形 
象 的 语言 描述 就 是 ， 随 机 徘 惫 在 质点 返回 原点 时 重新 开始 徘 惫 ， 因 此 第 r 次 返回 原点 
的 时 刻 可 视 为 -个 等 待 时 间 的 和 ， 这 些 等 待 时 间 可 解释 为 “在 相同 的 条 件 下 测量 同一 
个 物理 量 的 测量 值 ”， 普遍 认为 这 -~ 个 观察 值 的 均值 有 界 地 收敛 到 一 个 “ 真 值 但 现 
在 此 和 的 阶 实际 上 是 x ， 因 此 粗略 地 说 ， 此 均值 与 7 成 比例 .详细 分 析 显 示 : 这 个 
等 待 时 间 中 的 有 一 个 时 间 的 阶 与 7 个 等 待 时 间 的 和 的 阶 是 一 样 的 ， 痢 是 .在 实践 
中 ， 这 种 现象 被 归纳 为 “实验 误差 ”或 “出 现 意外 ”而 被 忽略 .发 现 人 们 不 愿 见 到 
的 东西 是 困难 的 . 


3.8 IHRE + 最 大 的 位 置 


每 一 条 路 径 对 应 于 由 加 号 和 减 号 组 成 的 有 限 序 列 ， 而 且 如 果 把 其 项 的 次 序 颠 倒 
一 下 ， 就 会 得 到 一 条 新 的 路 径 。 从 几何 的 观点 来 看 ， 新 路 径 是 把 老路 径 沿 其 终点 族 
转 180" 并 把 老路 径 的 终点 取 为 新 坐标 系 的 原点 而 成 .对 每 一 类 路 径 ， 虱 可 以 按 此 法 
在 同一 坐标 系 中 得 到 一 类 新 路 径 。， 如 果 起 始 的 随机 徘徊 的 诸 步 如 下 : Xi X250 Xas 
则 新 的 随机 徘徊 的 诸 步 定义 为 ; 


Xi 一 久久， = X]. (8. 1) 
新 随机 徘徊 的 顶点 由 下 列 部 分 和 决定 : 
Si =X; eet X; = Sp ~ Svs (8. 2) 


GEAR, Sè =0,55 一 S,)， 我 们 称 此 新 随机 徘徊 为 对 偶 的 随机 徘徊 .每 个 起 始 的 随机 
徘徊 所 定义 的 事件 ， 对 应 着 对 偶 的 随机 徘徊 所 定义 的 一 个 事件 ， 它 们 的 概率 相等 . 
用 此 方法 ， 几 乎 每 一 个 概率 关系 都 有 其 对 偶 性 ， 这 种 简单 的 导出 新 关系 的 方法 的 有 
效 性 ， 较 之 第 一 印象 要 大 得 多 . 它 的 全 部 威力 在 第 二 卷 书 中 关于 一 般 的 随机 人 徘徊 和 
排队 论 中 才能 展现 出 来 ， 但 是 ， 即 使 在 现在 的 内 容 中 , 我 们 也 能 轻易 地 推出 许多 有 趣 
的 结果 . 
为 了 说 明 这 点 ， 让 我 们 复习 这 类 对 偶 事 件 ， 下 面 列举 的 每 一 对 对 偶 事 件 都 有 值 
得 注意 的 方面 ， 下 列 例 中 ,7 均 视 为 固定 的 ， 而 且 路 径 的 端点 a, S) 简称 为 “ 终 
点 ”>， 为 了 方 使 起 见 ， 先 从 对 偶 的 随机 徘徊 的 已 知事 件 开始 . 
(a) 初 过 时 间 . 由 (8.2) 易 知 : 分 别 由 下 列 二 式 定义 的 事件 是 相互 对 货 的 ， 
S >0， j=1,2,"… ,nN (8. 3) 
和 
S,>S, 7 一 0,1, ,nl1. (8. 4) 
第 二 个 事件 的 意思 是 : 在 时 刻 n 以 前 ， 终 点 从 未 被 访问 过 ,由 (3.2) Al: Sone 


2v >0 为 偶数 时 ， 第 一 个 事件 的 概率 为 亏 w,; 而 当 ”一 2u 十 1 时 此 概率 仍 是 此 数 ， 因 


1. 原著 者 在 此 反复 说 明 ， 许 多 直观 是 不 可 靠 的 ， 甚 至 与 精密 的 理论 背道而驰 .一 译 者 注 
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为 SLS AMAT S20. AU AM @ nn 初 过 一 个 正 的 点 的 概率 为 过 9 Uv? 此 处 v= n 


或 w 一 也 (n—-1). CEJ, XXT n=1 也 成 立 ， 但 对 n=0 不 成 立 . ) 对 偶 原 理 在 此 使 


我 们 得 到 了 一 个 很 有 趣 的 结果 ， 而 直接 验证 此 结果 是 不 容易 的 . 

(b) 续 上 ， 在 前 面 的 引 理 中 ,终点 事先 并 未 特别 指明 . 限制 初 过 点 7 意味 着 在 
(8.4) 中 再 附加 条 件 S$, 二 x， 其 对 侦 事 件 是 由 这 样 一 些 路 径 所 构成 :， 它 从 原点 到 Cn, 
r) 而 且 其 全 部 内 顶点 都 在 坐标 轴 的 上 方 ， 这 种 路 径 的 条 数 可 以 直接 从 反射 引 理 得 到 
[Hx A=(1.1),B=(n,r)]. Abb, BB (7.4) 式 的 一 个 新 的 证 明 . 

(c) 在 终点 的 最 大 值 ， 在 (8.3) 和 (8.4) 中 把 严格 不 等 式 污 换 为 宇 ， 可 得 到 一 
对 新 的 对 偶 事件 ， 只 要 S, 是 最 大 值 ， 甚 至 此 最 大 值 在 此 前 的 某 一 NAS 


第 二 个 事件 也 发 生 '， BS 3.4), 我们 发 现 ， 此 事件 的 概率 为 wz,， 其 中 oo 一方 n 或 


(tD. 值得 注意 的 是 ， 此 概率 是 例 O 中 所 求 得 的 概率 的 2 4, 


)“ 已 经 返回 原点 次 ”这 一 事件 与 事件 “k 次 访问 终点 :发 生 在 时 刻 n 以 前 ” 

是 得到 对 个 的 类 似 的 陈述 可 应 六 用 到 符号 变换 中 去 ，( 至 于 其 概率 ， 可 见 3.5 市 和 本 
音 习 题 9 一 10.) 

(e) 初 访 终 点 的 反正 弦 律 ， 随 机 选取 一 条 长 为 n 二 2v 的 路 径 ， 在 例 Ca) p, R 

们 已 经 知道 ， 事件 “S, 是 正 的 且 SS. Ss, ;中 没有 一 项 等 于 S;,” 的 概率 为 


Lun X Sx 为 负数 的 情形 ， 上 述 类 似 结论 也 对 ， 因 此 ， 值 Sx 在 日 期 2v 以 前 从 未 达 


到 过 的 概率 为 u;,。 这 也 是 事件 “Sz, 二 0” 的 概率 ， 在 最 后 这 一 事件 中 ,终点 的 值 0 
在 时 刻 0 已 经 达到 了 :， 现 在 考虑 更 一 般 的 事件 : 初 访 终点 的 值 在 日 期 交 Ra, 
我 们 要 求 S 一 S: 但 S ASAH j<2k 成 立 )， 这 是 下 述 事件 的 对 侦 事 件 ， 最 后 一 
次 访问 原点 发 生 在 时 刻 2k， 而 且 在 3. 4 节 中 我 们 已 看 到 这 些 访问 服从 离散 的 反正 弘 
分 布 ， 因 此 我 们 又 得 到 了 一 个 意 想 不 到 的 结果 : 在 时 刻 2v 一 2k 初 访 终点 Sz 的 概率 为 
Azk 2o T UU- CR=O,1, +50). 特别 地 ， 由 此 推出 : 时 刻 2k 和 2v— 2k 是 等 可 能 的 . 
还 有 ， 特 别 早 或 特别 晚 初 访 的 概率 比 其 他 时 间 初 访 的 可 能 性 大 . 

(f) 最 大 值 位 置 的 反正 弦 律 。 作 为 对 偶 性 原理 的 有 用 性 的 最 后 一 个 例子 ， 我 们 证 
RAZED (a). (Cc) 中 所 得 到 的 结果 可 以 直接 推出 序列 S Sotto S, 中 达到 最 大 值 的 时 
刻 的 概率 分 布 ， 但 因为 最 大 值 可 以 多 次 达到 ， 所 以 我 们 必须 区 别 最 初 和 最 后 的 最 大 
值 ， 然 而 ， 结 果实 质 上 是 一 样 的 . 


1. 用 第 二 卷 书 第 12 章 的 术语 来 说 ， 我 们 用 弱 升 降 点 来 对 比例 ‘a》 中 的 严 升降 点 . 

2， 原 著者 定义 终点 为 《n,S;)， 因 此 时 刻 ”以 前 访问 终点 是 不 可 能 的 “在 时 刻 上 和 2 初 访 终点 ”其 实 是 
“ETH k Wt S,”， 即 S= S SAS, 对 一 切 J< 原著 者 在 例 〈d) 中 的 解释 亦 如 此 . 译 者 注 

3, 因 So 三 0， 一 一 译 者 注 
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为 了 简单 起 见 ， 令 n 二 2v 是 偶数 ， 第 一 次 最 大 值 发 生 在 时 刻 上 ， 如 果 
So TI, I AS, (8. 5a) 
S I IS,. (8. 5b) 


把 写成 & 王 2p 或 二 2p 十 1， MHP) Cad, BRT p50 WH (8. 5a) 的 概率 为 地 


事件 (8. 5b) SULLA MAI A BR 以 后 的 那 - 段 ， 显 然 其 概率 等 于 长 为 2v 一 的 、 其 
顶点 都 在 t- 轴 或 以 下 的 路 径 的 概率 ， 在 例 (c) 中 已 证 明 此 概率 为 uw,-;,。 因 此 ， 如 
果 0 二 有 过 2v， 在 序列 S,，-…，S;, 中 第 一 个 最 大 值 发 生 在 时 刻 上 二 20 或 上 一 20 十 1 的 概 
RA upna ETRE 或 上 二 2v， 其 对 应 的 概率 分 别 为 uf un 

(对 于 最 后 一 个 最 大 值 ， 时 刻 0 和 2v 对 应 的 概率 交换 一 下 就 行 ， 其 余 的 概率 保持 
不 变 ， 只 需 把 写成 k 一 26 或 二 20 一 1 即 可 . ) 

可 见 ， 把 奇 的 和 偶 的 下 标 适 当地 配对 ， 最 大 值 的 位 置 化 为 离散 的 反正 弦 分 布 的 


问题 ， 与 直观 想像 不 同 ， 在 扔 硬币 的 游戏 中 ， 最 大 的 累积 盘 利 发 生 在 游戏 的 早期 或 
晚期 的 可 能 性 ， 比 发 生 在 中 期 的 可 能 性 大 得 多 . 


3. 9 一 个 等 分 布 定 理 


作为 这 一 章 的 结尾 ， 我 们 来 证 明 曾 在 3, 1 节 例 (b) 中 提 及 的 有 关 高 尔 顿 的 行 序 
检验 的 一 条 定理 ， 这 可 以 说 明 稍微 改变 一 些 条 件 能 导致 结果 产生 怎样 的 改变 . 

3.4 节 中 曾 证 明 : 落 在 妃 轴 :上 面 的 边 数 服从 离散 的 反正 弦 分 布 ， 现 在 再 考虑 类 
似 的 问题 ， 但 我 们 的 注意 力 集中 到 从 原点 开始 而 终于 i-_ 轴 * 上 一 点 的 路 径 ， 其 结果 是 
想像 不 到 的 ， 因 为 它 与 反正 弦 律 明显 不 同 . 

定理 ”长 为 27 S= OA 2 WARM ERL OBAMA un/a) 
=2 favo (R=01.2,°°°) 它 与 上 无 关 . 

证 ”分别 考虑 k=0 M k=n 两 种 情形 ， 从 原点 到 (2n,0) 的 一 切 边 都 在 1- 轴 上 方 
的 路 径 数 等 于 从 (1,1) 到 (2n,0〉 的 从 不 触及 1- 轴 下 方 的 直线 的 路 径 数 . 由 反射 原 


理 ， 此 数 等 于 
27 一 ] 2n—l\ 1 /2n 
| n )— (1 =m; ): (9. 1) 
这 就 证 明了 k=n 的 情形 ， 由 对 称 性 有 二 0 时 外 成 立 ， 
对 于 1<& 委 " 一 1， 我 们 用 归纳 法 .容易 验证 定理 的 结论 当 "一 1 时 成 立 ， 假定 定 
理 的 结论 对 路 径 的 长 度 小 于 2n 成 立 ， 令 2r 是 初 返 原点 的 日 期 ， 可 能 有 两 种 情况 .如 


1. 原 书 此 处 为 x+- 轴 ， 应 为 1- 轴 ， 一 一 详 者 注 
2. 原 书 此 处 为 z- 轴 ， 应 为 1- 轴 ， 因 为 原作 者 一 开始 就 约定 t- 轴 是 横 坐 标 轴 ， 而 z- 轴 是 纵 坐 标 
轴 ， 一 一 译 者 广 
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朱 到 时 刻 2r 的 那 一 段 在 横 坐 标 轴 的 正方 ， 此 时 必 有 1 和 ”~ 委 &， 且 第 二 段 丛 有 2k 一 2r 
条 边 在 横 坐 标 轴 的 上 面 . 由 归纳 法 假设 ， 满 足 此 两 条 件 的 路 径 有 


girl f , DEn er _ pen 2 (9 9 
2r n—rty ener r(n—rt]) er? ener . ) 


种 不 同 的 选取 法 . 男 一 方面 ， 如 果 到 初 返 原点 那 一 段 全 在 横 坐 标的 负 方 ， 则 最 终 那 
一 段 长 为 2n 一 2r 的 子路 径 恰 含 2 条 正 边 ， 因 此 在 这 种 情况 下 必 有 7 一 r 宇 k&， 对 固定 
的 rx， 满足 这 些 条 件 的 路 径 数 也 是 由 (9.2 所 给 出 。 因 此 ， 在 上 述 两 种 情况 中 ， 路 
径 的 总 条 数 分 别 为 把 (9. 2〉 对 1] 委 r 委 & 求 和 与 对 1 委 - 委 ?一 & 求 和 ， 在 第 二 个 求 和 
中 把 求 和 指标 由 了 变 为 o 一 ?十 1 一 r， 则 从 & 十 1 跑 到 mn， 只 要 把 +r 换 为 op， 此 和 中 每 
一 项 均 与 (9.2) 中 的 相应 的 项 一 样 . 由 此 推出 : 具有 上 条 正 边 的 路 径 数 等 于 把 (9. 2) 
式 对 一 切 <r <n RAM. ALR GE (9.2) 式 中 并 不 出 现 ， 故 此 和 不 依赖 于 &， 因 为 总 的 
路 径 数 为 2”4,,， 这 就 决定 了 每 种 情况 下 的 路 径 数 . (直接 的 计算 见习 题 13. ) > 
关于 最 大 值 的 位 置 的 类 似 的 定理 也 对 (参见 3. 10 节 习 题 14). 


3.10 3 fel 


1 (a) 如 果 a>0 且 6>0,， MABE s >b, Si > b, s =a REA BRA 
N na Naat2h 
(b) 如 果 b>>al>0, WEAR sbs, Sr Cbs Sa =a NRE BROAN Nna ~ Na, 2a. 
2. 4a>c>0 H b>0, AR 5a 且 此 后 一 直到 (noc) 都 未 触及 直线 r= — b 的 路 径 的 总 
数 为 Nna Naato. CER: 这 些 路 径 包 含 了 在 触及 直线 + 二 a 以 前 触及 直线 c= —b 
的 那些 路 径 . ) 
3. 重复 反射 设 a oO MERERMB-—b<c<a MRA Co) 的 中 间 既 未 触及 直线 
Xx 二 一 b 义 未 触及 直线 二 a 的 路 径 的 总 数 等 于 下 述 级 数 : 
DI CCN,akatt te ~ Nn 2katb)+2a—c) 9 
此 级 数 是 对 一 切 & 从 一 ce 到 ce 求 和 ， 但 只 有 有 限 个 非 零 项 . 
提示 ; 应 用 并 推广 前 一 问题 的 方法 . 
注意 : 此 问题 与 赌博 中 的 所 谓 破产 问题 有 联系 ， 在 一 场 赌 博 中 ， 若 赌 者 双方 各 有 初始 本 
金 a 和 6 元 ， 则 赌博 将 在 累积 资本 达到 a 或 一 b 时 结束 .关于 与 统计 检验 的 联系 可 参见 
3.1 节 例 (c). 
(重复 、 反 射 的 方法 将 在 第 14. 9 节 习 题 17 中 再 一 次 用 到 ， 与 第 二 卷 书 第 10.5 PY BE 
论 也 有 联系 . ) 
4. 从 引 理 3. 1 推出 (不 用 计算 ): 
zz 十 tt 十 … 十 tnto 一 | 
S. 证 明 ， 
i 
e= 2 | fon = (— 1)! | 


z | 


| 


11. 


12. 


13. 


14. 
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如 像 第 2B (12.9) 推出 (2.6) 一 样 ， 推 出 前 一 问题 的 恒等式 . 
用 几何 方法 证 明 ， 从 原点 到 (22 十 2,0) 的 一 切 内 顶点 都 严格 在 模 坐 标 轴 正 上 方 的 踏 径 
数 ， 等 于 从 原点 到 (2n,0) 的 一 切 顶 点 在 横 坐 标 轴 上 方 的 (允许 落 在 模 坐 标 轴 上 〉 路径 数 . 
因此 P{S, 220,00? Son] 20, Son =0)=2f2nt2. (提示 : 参考 图 3- 1.) 
首先 证 明 由 下 述 方法 构造 的 两 族 路 径 能 建立 一 个 一 一 对 应 ， 然 后 再 利用 它 儿 何 地 证 明 引 
FH 3. 1. 

给 定 一 条 从 原点 到 (2n,0) 的 路 径 ， 令 M=(hom) 是 此 路 径 的 最 左边 的 最 小 点 .把 
从 原点 到 M 这 一 段 路 径 对 垂直 线 1 一 & 作 反射 并 滑动 这 反射 的 一 段 到 问 点 (2n,0)， 如 末 
取 M 做 新 坐标 系 的 原点 ， 则 新 路 径 从 原点 到 (2n,2m) 且 一 切 顶 点 严格 落 在 横 坐 标 轴 上 
或 其 上 方 . 上 [此 构造 源 自 尼 和 尔 森 (E. Nelson). | 
考虑 从 不 与 直线 x 二 一 1 相遇 的 路 径 ， 直 接 证 明 公 却 (3.5). 
在 时 刻 2n 以 前 恰巧 发 生 r 次 返回 原点 的 概率 ， 等 于 在 时 刻 2n 返回 了 原点 县 此 前 至 少 有 > 
次 返回 原点 的 概率 . 提示 : 用 引 理 3. 1. 


， 续 上 题 ， 令 xz 为 在 时 刻 2n 及 其 以 前 恰巧 发 生 r 次 返回 原点 的 概率 ， 应 用 前 一 个 问题 ， 


证 明 : mr 2n = Or, 2n F orti,2n Fts 此 处 Or,2n 是 第 r 次 返回 原点 恰巧 发 生 在 时 刻 2n 的 概率 . 
利用 定理 7.4 推出 : 


enn SS (err), 


符号 变换 次 数 的 概率 的 另 一 种 推导 .证明 : 


n—] 
5 2n—-1 一 = > fee LE), 2n-1—2k + E., 2n—i—2k J. 


k=] 


归纳 地 ， 假 定 〈5. D 式 对 到 2n—-1 之 前 的 一 切 时 刻 都 成 立 ， 证 明 : 


n—l 
B21 = 2 > Jor P 2n—2k,2r- 


这 是 返回 原点 以 后 到 达 点 (2n,27) 的 概率 ， 考 虑 第 一 步 ， 并 应 用 选举 定理 证 明 (5. 1) 成 立 . 
Sop =0 HÆJJ Si sees Ss,_1 的 最 大 值 是 的 概率 等 于 P{Szo 一 28} 一 PS 三 2 十 2}， 用 反射 证 
明 此 结果 . 

第 3. 9 节 的 证 明 中 曾 证 明了 : 


Fi 


l __ i 
`, rn—rt1) Urr 一 n+ er" 


r=] 


证 明 此 关系 等 价 于 (2.6)， 提示 : DRAT. 
考虑 一 条 长 为 2n 的 满足 Sz 一 0 的 路 径 ， 把 其 边 环形 地 标 序 ， 其 办 法 是 把 0 和 2n 视 为 同 
一 物 ， 这 就 产生 了 一 个 结果 ,第 一 条 边 与 最 后 一 条 边 变 为 紧邻 的 两 条 边 ， 应 用 循环 排列 ， 
视 作 具 有 原点 kS) 的 闭路 径 。 证 明 这 样 做 ， 其 最 大 值 保持 不 变 , 但 其 位 置 往 前 移 了 
有 步 ， 证 明 当 全 部 2n 个 循环 排列 都 用 了 以 后 ， 最 大 值 发 生 在 7 的 次 数 不 依 赖 于 . 

随机 抽取 一 条 满足 So, =0 的 路 径 ， 并 抽出 其 最 大 值 所 在 的 位 置 〈 如 果 最 大 值 的 位 置 惟 
一 的 话 ); 如 果 最 大 值 的 位 置 有 ?个 ， 则 随机 地 选取 一 个 ， 些 过 程 的 数目 界 于 0 与 2n 一 1 之 
fa]. 证 明 一 切 可 能 性 均等 . 
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本 章 讨 论 关 于 由 某 些 其 他 事件 A Als An 所 确定 的 一 些 事 件 ， 例如 在 桥牌 游 
戏 中 ,，“ 至 少 一 家 有 同一 花色 ”的 事件 A 是 由 四 个 事件 Ai(k 一 1,2,3,4) 所 成 之 并 ， 其 
中 A, 是 事件 “第 & 家 有 同一 花色 ”， 由 于 诸 事件 A. 可 能 一 个 、 两 个 或 多 个 同时 发 
生 ， 也 正 因为 有 这 些 重 迄 关系 ， 所 以 事件 A 的 概率 并 不 是 四 个 概率 PiAi} 之 和 ， 对 
于 给 定 的 一 组 事件 AL, Ars Ane RMK MATRA AO 个 ，1 个 ， 
2 个 ，…… 同时 发 后 的 概率 . 


4.1 事件 之 并 


iA, FA, 是 两 个 事件 ， 则 A=A,U A, 表示 A, BEA, 或 两 者 同时 发 生 的 事件 . 
由 第 1 章 (7.4) 式 我 们 有 
P{A} = P(A} + P{A,} — P{A A}. (1.1) 
现在 ， 我 们 希望 将 此 公式 推广 到 NTRA A As 的 情形 ， 也 就 是 说 ， 我 们 想 
要 计算 事件 “至 少 有 一 个 A 发 生 ” 的 概率 ， 这 事件 可 用 符号 A=A, UA; Us UAn 
KET. 为 此 ， 仅 知道 每 个 事件 A, 的 概率 是 不 够 的 ， 我 们 还 必须 知道 关于 事件 A, 
的 所 有 可 能 重 迭 的 全 部 情况 ， 也 就 是 对 于 每 个 二 元 组 (i,7)， 每 个 三 元 组 G7), 
等 等 ， 我 们 必须 知道 A, 与 4), AA 与 A 等 等 同时 发 生 的 概率 ， 为 了 便于 表达 ， 
我 们 将 用 字母 p 加 以 适当 的 下 标 来 表示 这 些 概 率 . 于 是 
p, = P{A,},p,, = PIAA; s pua = PLA; A; Ai) (1. 2) 
此 处 ,下 标的 先后 次 序 是 无 关 紧 要 的 ,但 是 ,为 了 统一 起 见 ， 我 们 将 按 下 标 数字 的 
大 小 顺序 来 书写 ; 因此 ， 我 们 不 写 prou 而 与 p37,n. 两 个 下 标 永 不 相等 ， 令 S, 表示 
所 有 具有 r 个 下 标的 p 之 和 ， 即 定义 
S =p, SoD pi 5 D pijat" (1.3) 
HEE i<j NN, Wit, GAREM AMHR EAK. WS. 共有 


(N\A. BERAN Sy LA pan ERRENA NN 个 事件 同时 实现 的 概 


率 ， 当 N=2 时 ， 只 有 两 项 S SS, AR (1.1) 可 写成 
P{A} — S — So. (1.4) 


x 此 章 内 容 在 以 后 不 多 用 ， 仅 第 一 个 定理 相当 重要 . 
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对 于 任意 N 个 事件 的 和 情况， 可 推广 成 如 下 的 定理 . 
定理 在 事件 Ai Als Ay P, 至少 有 一 个 实现 的 概率 P 由 下 式 给 出 : 
P, = S — S, + S, — S, +--+ H Sy. (1.5) 
证 用 所 请 “包含 与 排斥 ”的 方法 来 证 明 1.5) (参见 4.6 UB 26). ATH 
A Pl ， 我 们 要 把 至 少 含 在 一 个 A, 中 的 所 有 样本 点 的 概率 都 加 起 来 ， 而 每 个 这 种 点 的 
概率 只 能 加 一 次 .为 了 有 系统 地 进行 ， 首 先 累加 那些 只 含 在 一 个 A 中 的 点 的 概率 ， 
其 次 是 那些 恰 含 在 两 个 事件 A, 中 的 ， 依 此 类 推 , 最 后 是 那些 含 在 所 有 A 中 的 点 〈 如 
果 有 的 话 ) 的 概率 .现在 ， 设 王 为 任 一 样本 点 ， 它 恰好 含 在 这 六 个 事件 的 2 个 中 . 
不 失 一 般 性 ， 我 们 可 以 将 事件 组 {A;; 重新 编号 ， 使 编号 之 后 ， 上 恰好 含 在 Al,A;， 
=A, 中 ， 而 不 在 AL Anos ,An 中 ， 于 是 ，P{E}) 将 出 现在 各 个 pi Pijs Pirre t 


之 中 ， 此 处 的 下 标 数字 都 是 从 1 到 nn， 故 P{E}) 在 Si PHB nik, 在 5 中 出 现 ( ? ) 次 


等 等 .总 之 ， 当 (1. 5) 的 右边 用 样本 点 的 概率 来 表示 时 ， 得 到 了 P (E) 出 现 的 次 
数 是 


n= (3) Gte (7): (1. 6) 

要 证 明 这 个 定理 ， 只 须 证 明 这 个 数 等 于 1 便 够 了 . 把 (1.6) 与 (1 一 1)" 的 二 项 展开 
式 [参看 第 2 章 (8.7)] 作 比 较 ， 立 刻 就 可 以 得 到 这 个 结论 . 因为 (1 一 1)" 的 展开 
式 中 的 第 一 项 是 ]， 而 紧 接 着 的 各 项 便 是 (1.6) 各 项 的 反 号 ， 故 对 于 每 个 ?之 1， 表 
达 式 (1.6) 都 等 于 1， 这 就 证 明了 定理 . > 
例 (a) 在 桥牌 游戏 中 , RA 为 “第 i 家 有 同一 花色 ”的 事件 ， 则 p54 


(总 )， 第 i 与 第 j 两 家 同时 都 有 同一 花色 的 事件 的 发 生 有 4. 3 种 可 能 的 方式 ， 并 且 有 


92 


概率 p= 12+ (7 


ÉS): ma 


panze GG) 


最 后 ， Pi.2.3.4 T Pi1,2.3， 因为 当 三 家 中 每 家 都 有 同一 花色 时 ， 第 四 家 必然 也 有 同一 花 
色 . 因此 某 一 家 有 同一 花色 的 概率 是 P, =4pþı — pi. 十 4p1.,.3 — P12.34. 利用 斯 特 林 


公式 ， 可 以 近似 地 得 到 P,==10-™. 在 这 个 特殊 的 情形 下 ，P) 很 相近 于 A; 的 概率 


之 和 ， 但 这 并 不 是 常规 ， 而 是 一 个 例外 . 

(b) 相 合 (一 致 );，、 孟 德 模 (Montmort) (1708) 首先 提出 下 面 的 有 多 种 变形 和 一 
个 奇妙 的 解答 的 问题 ， 它 曾 被 拉 普 拉 斯 与 许多 其 他 作者 推广 过 . 

设 有 两 副 同 样 的 纸牌 ， 每 副 各 有 N 张 不 同 的 牌 ， 把 这 两 副 牌 都 均匀 地 洗 过 之 后 ， 
就 将 此 两 副 牌 依 它们 的 次 序 逐 一 翻 看 对 比 . 若 在 两 副 牌 中 ， 同 一 位 置 的 两 张 牌 恰好 
是 相同 时 ， 我 们 就 说 有 一 个 相合 〈 一 致 )， 因 而 ， 相 合 可 以 在 六 个 位 置 的 任何 一 处 友 
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生 ， 也 可 以 在 大 干 个 位 置 上 同时 发 生 . 这 样 的 试验 还 可 以 用 更 有 趣 的 形式 来 描写 . 
例如 ， 我 们 可 用 N SAS N 个 信封 来 代替 两 副 纸牌 ， 而 设想 一 个 马虎 的 秘书 把 信和 与 
信封 随意 地 相配 .或 者 我 们 也 可 以 把 它 设 想 成 把 混 放 在 衣帽间 的 帽子 随便 地 发 还 给 
宾客 ， 寿 某 一 客人 所 得 的 帽子 恰好 是 他 自己 的 ， 则 说 有 一 个 相合 .我 们 可 以 设想 一 
下 一 个 相合 发 生 的 概率 与 NN 的 关系 : 在 一 个 共有 8 个 客人 的 餐馆 中 ， 帽 主 与 其 帽子 
有 一 个 相合 的 概率 同 10 000 人 中 有 一 个 相合 的 概率 相 比 较 ， 结 果 如 何 呢 ?人 们 将 感 
到 奇怪 ， 实 际 上 ， 这 个 概率 差不多 与 N 无 关 ， 总 是 近乎 2/3 (对 于 较 有 价值 的 应 用 ， 
可 参见 4.6 节 习 题 10,11). 

在 4.4 节 里 ,我们 将 计算 恰 有 0,1,2,3,… 个 相合 的 概率 这里， 我 们 仅仅 求 出 
至 少 有 一 个 相合 的 概率 P. 为 了 表达 简单 起 见 ， 让 我 们 将 纸牌 编 上 号 数 1,2,3,…， 
N， 并 假定 有 一 副 纸 牌 是 按 它 自然 的 顺序 排列 的 ， 而 为 一 副 纸牌 的 每 一 种 排列 都 有 概 
率 1/N!. OA, 为 在 第 & 个 位 置 上 这 两 副 纸 牌 出 现 相 合 的 事件 ， 这 意味 着 : 编号 为 上 
的 牌 排 在 第 & 个 位 置 ， 而 其 余 的 N 一 1 张 牌 可 以 按 任 意 的 顺序 来 排列 ， 显 然 ，pi 二 
(N 一 1)! /N! =1/N. 同 理 ， 对 每 一 组 i,;), 我 们 有 pb; =(N—-2)! /N! =1/ 


N CN 一 D， 等 等 ， 在 和 S. 中 包含 有 (”) 个 项 ， 其 中 每 一 项 都 等 于 CN 一 站 1 /NI 
因此 S, 二 1/r! 及 由 (1.5) 即 可 得 到 所 要 求 的 概率 是 


ll 
P=1 21 31 十 ENT (1.7) 
14 l l,l io. 
e =ł I+ 5 31 a 十 (1.8) 
中 的 前 N+1 项. 因此 我 们 有 一 个 良好 的 近似 式 
P, 1—e! = 0. 632 12.…. (1. 9) 
FÆ P 的 准确 数值 可 说 明 (1. 9) 的 近似 程度 是 很 好 的 . 
N= 3 4 5 6 i 
P= 0.66667 0.625 00 0. 633 33 0.631 96 0.63214 >》 


4.2 在 古典 占 位 问题 中 的 应 用 


现在 回 到 把 7 个 球 随机 地 放 到 n 个 盒 中 的 问题 ， 设 每 种 不 同 的 放 法 都 具有 相同 的 
概率 n“.， RATER WGA m PES Cron)’. 

设 A, 代表 第 & 个 盒 是 空 的 这 一 事件 (4 二 1,2,…,n)， 在 这 事件 中 ， 所 有 7 个 球 剖 
放 到 其 余 的 n 一 1 个 盒 里 ， 并 且 ， 这 样 的 放 法 共有 (n 一 1)" 种 ， 同 理 ， 预 先 指定 的 两 


1. 这 个 概率 在 2. 11 PAM 8 中 兽 用 完全 不 同 的 方式 推出 过 ， 可 把 它 与 4. 3 节 中 的 例子 比较 . 
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个 盒 是 空 的 放 法 共有 (n 一 2)" 种 ， 依 此 类 推 ， 于 是 得 到 


p=(1-+), p= (174), poor=(1—2), D 
因此 ， 对 于 每 个 USN: 有 


s, = (")Q-2). (2. 2) 


U fi 
至 少 有 一 个 盒 是 空 的 概率 由 1.5) 给 出 ， 因 此 所 有 的 盒 都 不 空 的 概 滨 为 T 一 Si 十 
S, 一 十 …， 或 者 


po(ryn) = Dow a-z). (2. 3) 


现在 我 们 考虑 一 个 恰 有 mw 个 盒 空 的 分 布 ， 这 mm 个 盒 可 以 有 (，”) 种 方法 选取 .x 个 球 


分 布 在 其 余 的 n 一 m 个 盒 中 ， 因 此 这 样 的 分 布 基 有 (一 mpo《r,n 一 m) 种 . 际 以 x ， 
我 们 发 现 恰 有 m 个 金 是 空 的 概率 为 


Daron) = ("= 2) porn =m) 


n n—m mrvy 
= ("Uo , (1-22), (2.4) 
我 们 曾经 采用 > 个 随机 数字 的 模型 来 比喻 > 个 物件 任意 地 放 人 10 个 盒 中 ， 此 时 ， 
空 盒 对 应 于 数字 的 不 出 现 ， 若 疡 个 盒 是 空 的 ， 则 10 一 m 个 不 同 数字 就 出 现在 所 给 出 
的 序列 中 ， 表 4- 1 供给 我 们 一 个 数值 的 实例 . 


表 4-1 AYn=1OK, 按照 公 式 (2.4) 所 计算 的 概率 pn (7,10) 


m r= 10 r==18 

0 0. 000 363 0. 134 673 
1 0.016 330 0. 385 289 
2 0. 136 080 0. 342 987 
3 0. 399 622 0. 119 425 
4 0. 345 144 0. 016 736 
5 0. 128 596 0. 000 876 
6 0.017 189 0. 000 O14 
7 0. 000 672 0. 000 000 
8 0. 000 005 0. 000 000 
9 0. 000 000 0. 000 000 


Pm (r,10) 是 在 一 列 > 个 随机 数字 中 ， 0, ,2 9 hA m 个 不 出 现 的 概率 . - 


显然 ， 在 (2. 4) 中 ， 直 接 的 数字 计算 是 在 与 r 都 较 小 时 才 是 适用 的 , 但 占 位 
问题 只 在 n 相当 大 时 才 令 人 关注 . 例如， 若 10 000 个 球 任意 地 放 到 1000 TT. R 
音 有 多 少 机 会 发 现 一 个 空 盒 ? 在 人 数 为 2000 的 人 群 中 ， 发 现 一 年 中 的 某 一 天 不 是 这 
些 人 的 生日 的 机 会 又 是 多 少 ? 幸好 ， 这 类 问题 可 以 利用 一 个 很 简洁 而 又 令 人 满意 的 
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近似 法 来 回答 . 4n> ce 时 ， 其 误差 趋 于 零 . 有 关 这 近似 法 的 讨论 是 概率 论 中 许多 
极限 定理 的 典型 ， 

于 是 ， 我 们 的 目的 在 于 讨论 当 n 一 o,r > co 时 公式 (2.4) 的 极限 形式 ， 原 则 
Ek, 7 与 n 之 间 的 关系 是 任意 的 然而， 比例 r/n 是 表示 每 一 盒 中 物件 的 平均 数 . 如 
果 r/n 很 大 ， 我 们 就 不 能 期 望 有 空 合 ， 在 这 种 情形 ，p。 《xr,n) 近 似 于 1 而 所 有 的 Pair, 
n)(m=1) 都 很 小 ， 另 一 方面 ， 若 r/n 趋 于 零 ， 则 几乎 所 有 的 盒 都 是 空 的 ， 此 时 ， 对 
每 一 固定 和 的 m,p,(r,n) 一 0 因此， 只 有 中 间 情 形 才 真正 有 讨论 的 意义 . 

我 们 首先 估计 公式 (2.2) 中 的 量 So ALA (aT (Cn), <n’, BRITA 


vbr 
(=) <u S<x2(1- 4), (2. 5) 
对 0 过 :过 1， 由 第 2 章 的 展 式 (8.10) 显然 有 一 log(1 一 扎 落 在 上 与 区 (一心 之 间 ， 故 
(ne O O < tS, < (ne Y, (2.6) 

为 了 简单 起 见 ， 令 
ne "” =}, (2.7) 


并 假定 > 和 ?7 以 这 样 一 种 方式 上 升 : 使 A 保持 有 界 ， 于 是 ， 对 每 一 固定 的 v，(2. 6) 
中 左右 两 端的 数 的 比 趋 于 1， 因 此 ， 我 们 推出 


0< 4-5, 一 0 (2. 8) 
当 4 一 0 时 ， 此 关系 式 严 格 成 立 ， 因 此 (2. 8) 式 仍 然 正 确 ， 则 
e*— prin) = > (Ds. > 0， (2. 9) 
但 (2.4) py C nm) 的 因子 可 以 写成 5,， 从 而 对 每 一 个 固定 的 加 ， 都 有 
pu (ryn) — et om > 0, | (2. 10) 


XMR T FEE BY EH : 

定理 ” 当 n 和 r 增 大 而 使 得 A 二 ne "ARAA, MiA m, (2.10) 

近似 表达 式 

plm; à) = e* An (2.11) 

称 为 泊 松 分 布 ， 它 是 一 个 非常 重要 的 分 布 ， 描 述 了 各 种 现象 ， 我 们 将 在 第 6 章 仔 细 
HEE. 

实际 上 ， 当 nn 相当 大 时 ， 就 可 用 pm 作为 一 个 通 近 .而 对 于 不 大 不 小 的 值 
n， 就 需要 估计 误差 ， 这 里 我 们 并 不 打算 就 此 展开 讨论 . 

例 〈a) 当 盒 的 个 数 是 1000， 而 球 的 个 数 在 5000 与 9000 ZBR, Æ 4-2 给 出 了 
恰 有 mm 个 空 盒 的 概率 的 近似 值 ， 当 r= 二 5000 时 ， 空 盒 个 数 的 中 位 数 是 6， 也 就 是 说 ， 
出 现 7 个 或 更 多 的 空 盒 的 可 能 性 与 出 现 6 个 或 更 少 的 空 盒 的 可 能 性 是 差不多 的 ， 如 果 
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把 9000 个 球 任意 分 配 到 1000 个 盒 里 ， 则 可 发 现 一 个 空 盒 的 机 会 是 1/9. 
表 4-2 把 > 个 球 随 机 地 放 入 1000 EE, HARA m 个 空 盒 的 概率 的 泊 松 近 值 (2.11) 


p(m;A) 

a. n [m=O we 
5000 | 6. . 0012/0. 008010. . 1017/0. 1371/0. 1540/0. 148210. 1249/0. 0935/0. 0630/0. 0386 
5500 - 1951/0. 159610. 1088/0. 0636/0. 0325/0. 014810. 006010. 0023 
6000 
6500 
7000 
7900 
8000 
8500 
9000 


(b) 在 生日 的 统计 中 [第 2.3 节 例 d], n=365, r ÆA. 4 r=1900 时 ， 则 
近似 地 有 X= 二 2， 在 一 个 有 1900 人 的 村 庄 里 ， 一 年 中 有 m 天 不 是 生日 的 概率 可 近似 地 
表示 如 下 : 


Pro) =0. 135, Puj =0. 271 Pro] =0. 271 Piz =0. 180 
Piy = 0, 090 Prs) =). 036 Prs] =Q. 012 Pir = 0. 003 
(c) 当 ?2 log ntan TERM A n TÆPH n 很 大 时 ， 所 有 nn 个 盒 部 有 球 的 概率 
为 1 一 e“. > 


其 实 ， 我 们 也 可 以 考虑 恰 含 & 个 球 的 盒子 ， 则 上 面 关 于 &=0 的 特殊 情况 下 的 论 
断 也 可 应 用 ， 只 需 作 小 的 改动 ， 正 如 冯 。 米 泽 斯 指出 ， 恰 有 m 个 盒 ， 每 个 都 含有 上 & 
个 球 的 概率 ， 也 可 以 用 泊 松 表示 式 C. 11) 来 通 近 ， 只 不 过 要 把 和 定义 为 


à = ne” (Z) /AL (2. 12) 


4. 3 NN 个 事件 中 实现 m 件 


4. 1 节 的 定理 可 以 加 强 ， 如 下 面 的 定理 : 
定理 ”对 任何 正 整 数 m，]1 达 mm 牵 N， Æ NANFA e As PRAM 个 同时 发 
生 的 概率 Pr 为 


m+ 1 m+ 2 | N 
注意 ; 根据 (1. 5)， 没 有 一 个 A; 发 生 的 概率 Peo 为 
Poy = 1— P, = 1— S +S, — S; tt FS. (3. 2) 


这 指出 了 ， 如 果 取 S, 二 1，(3.1) AX m=0 时 也 是 对 的 ， 
证 ”我们 采用 (1. 5) 的 证 明 方法 . RE RR TRAM, FREE AEN 
个 事件 A; Hn SP, WLK n= m 时 样本 点 上 的 概率 PtE) 才 是 概率 Pow 的 组 成 部 
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分 .现在 ， 我们 来 观察 P{E} 在 (3.1) 右边 出 现 的 情况 ， 注 意 ，P{E} 只 在 和 S, 
Sz stts Sa R, 而 不 在 Sati o Onez 9 ON 中 出 现 . 于 是 ， 当 n<m 时 ， P(E} FE 
(3.1) 右边 不 出 现 . 4An=ma, PERE S, 中 的 一 项 出 现 . 要 完成 定理 的 证 明 ， 
只 要 证 明 下 面 的 情况 便 可 以 了 ， 即 当 nmt, Æ 3.1) 右边 的 项 Sns Sneis 


S, 中 ，P{ 忆 出 现 的 次 数 应 该 恰好 相 消 ， 由 于 包含 已 的 “个 事件 可 以 组 成 {，) 个 A 


重组 ， 故 P(E) TES, 中 共 出 现 { tk. BEX n>m, PLES HE (3.1) 右边 出 现 总 
的 次 数 是 
nt Cn Mn eal ERGY. e 
当 二 项 系数 用 因子 来 表示 时 ，(3.3) 可 写成 
WETO- CTG] ea 
花 括 号 内 恰好 是 (1 一 了 DD"””" 的 二 项 展开 式 ， 因 此 (3.，3) 式 化 为 零 ， 这 正如 我 们 所 断 
言 的 . > 
读者 可 以 验证 : 把 (2.2) 代入 G.D 直接 推出 公式 (2. 4). 


4.4 ”在 相合 与 猜测 问题 中 的 应 用 


4. 1 节 例 (b) 中 ， 我 们 考虑 两 副 纸牌 的 相合 问题 ， 并 求 出 S; 二 1/&!1. 将 它 代 入 
(3.1) 就 得 到 下 面 的 绪 采 : 

设 有 两 副 同 样 的 纸牌 ， 每 副 各 有 NN 张 不 同 的 牌 ， 在 两 副 牌 的 随意 配对 中 ， 恰 有 
m 个 相合 的 概率 Pr] 可 以 由 下 式 给 出 


,1 

Po=1-1+ti It "tN TWO Ib -NI 
1 
ll li l pl 

Pa 一 让 ltz" tN TN 21 
1l a agd 1, .4 l 

1 1 
Pwa (ya 人 ap 


_ i ay = 
Pin- =NI] {j—1} =0 


l 
Pos = NT 
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最 后 的 一 个 天 系 是 显然 的 ，P -等于零 表 示 : 有 N 一 1 个 相合 而 没有 所 有 的 N 
个 相合 是 不 可 能 的 事件 . 
E (4.1) RAUBET S WREE e 展开 式 中 的 表 契 干 项 ， 故 对 于 相当 大 的 N, 
我 们 有 近似 式 
Pay ~ © (4. 2) 
# 4-3 给 出 了 N= 二 3,4,5,6,10 时 所 对 应 的 诸 Pr 的 准确 值 与 极限 值 ， 每 列 中 的 前 部 
给 出 了 Pr 的 准确 值 ， 而 最 后 一 列 却 给 出 了 它 的 极限 值 


e! 


Pin = ts (4. 3) 
mM, 
4-3 对 一 副 NN 张 不 同 的 牌 进行 猜测 而 恰 有 m 次 猜 中 的 概率 
N= 10 
Pm 

of 0.333 0.296 | 0.375 0.316 . . - . 0.36788 0. 34868 0. 367879 
1] 0.500 0.444 | 0.333 0.422 . . . . 0. 36788 0.38742 0. 367879 
0.250 0.211 . . . . 0.18394 0. 19371 0. 183940 

0.167 0.037 s.. 0. 047 . . . . 0.06131 0. 05740 0. 061313 


0.042 0.004 e.. . . . 0.01534 0.01116 | 0.015328 
see 0.00306 0.00149 | 0.003066 

0.00052 0.00014 | 0.000511 

0.00007 0.00001 | 0. 000073 

0. 00001 ves 0. 000009 

0. 000001 
0. 000000 


O co ~s mm OO 号 GW BS 


hol 


Pr 由 (4.1) BH. 6, 由 (4.4) 给 出 ， 最 后 一 行 由 泊 松 极限 4.3) 给 出 . 


从 表 中 可 以 看 到 名 对 Pd 的 近似 是 相当 良好 的 ， 甚 至 对 于 不 大 的 N ETT. 
(4.3) 所 定义 的 数值 p。 有 如 下 的 性 质 : Dae! (14At t+) =e e= 


因此 ，p, 可 以 解释 为 概率 ， 注 意 (4. 3) 为 泊 松 分 布 (2.11) “4A=1 的 特别 情形 , 

例 ”检验 猜测 能 力 . 

在 尝 酒 鉴定 及 在 心理 测试 等 场合 中 ， 要 求 被 测 者 按 序 说 出 一 组 木 知 顺序 的 NN 个 物品 ， 
比如 说 纸牌 ， 被 测 者 表现 出 的 任何 判断 力 ， 都 违背 了 随机 性 的 特点 . 要 想 从 他 的 猜 中 率 来 判 
断 其 判断 能 力 ， 我 们 需要 算 一 算 运 气 的 概率 ， 随 机 的 猜测 可 依照 几 种 方式 来 进行 ， 我 们 在 此 
仅 叙 述 其 中 三 个 极端 的 可 能 情形 . (CD 被 测 者 始终 只 猜 一 张 固定 的 纸牌 ， 则 在 N 次 猜测 中 ， 
他 一 定 有 一 次 且 仅 有 一 次 猜 中 ,因此 ， 猜 中 次 数 没 有 随机 的 起 伏 .《〈2) 在 六 次 猜测 中 ， 被 
测 者 每 张 牌 都 猜 一 次 ， 则 N 次 猜测 就 对 应 于 N 张 纸牌 的 一 个 排列 ， 若 被 测 者 没有 什么 秘 
诀 ， 则 公式 〈4. 1) 可 以 应 用 . (3) 在 N 次 猜测 中 ， 被 测 者 每 次 皆 可 猜测 N 张 牌 中 的 任意 一 
张 ， 即 NN 次 的 猜测 是 彼此 独立 地 进行 ， 此 时 ， 共 有 NY 种 可 能 的 排列 . 实际 上 ， 每 人 有 其 
国定 的 心理 习惯 ， 往 往 会 倾向 于 多 猜 某 些 牌 ， 但 在 初步 近似 中 ， 我 们 可 以 假设 所 有 N ”种 排 
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列 都 是 等 概 的 ， 由 于 猜 中 mn 个 而 其 余 N 一 到 个 不 猜 中 的 排列 共有 (人 ) CN 一 Dr" 种 ， 故 愉 
及 个 猜 中 的 概率 是 


b, = Porman (4. 4) 


m NN 
[这 是 二 项 分 布 的 特殊 情形 ， 在 2.4 节 例 o 中 已 推出 , | 
表 4-3 给 出 了 按照 方式 (2) 或 方式 G) 进行 试验 时 ， 其 猜 中 概率 的 比较 ， 为 了 判断 两 
种 方式 的 短 长 ， 我 们 需要 均值 与 随机 起 伏 的 理论 ， 在 这 两 种 方式 上 下， 猜 中 的 平均 次 数 都 是 1， 
而 方式 (2) 的 随机 起 伏 比 方式 G) 来 得 大 些 ， 从 表 4- 3 中 可 看 到 ， 实 际 上 ， 它 们 之 间 的 差 
别 不 是 太 大 . > 


4.5 Ze 录 


1. BDA m 个 事件 实现 


沿用 第 3 PRS, AFAA An 中 ， 有 m 个 或 更 多 个 事件 同时 发 生 的 
P, 可 以 由 下 式 给 出 : 
Pa = Pr + Pima T+ Prem. (5.1) 
要 求 用 S, 来 表达 已 , 的 公式 ， 最 简易 的 途径 是 采用 归纳 法 ， 从 公式 1.5) 出 发 ， 应 
FARE ZA St P,. = Pran Pim Ble, 4 m 之 1 时 ， 有 


P, =S, h Sua + (PTT) Sa — (PTE) Spa +e (STs (5. 2) 
此 外 ， 还 可 用 (3. 1) 的 结果 直接 导出 (5. 2). 
2. 其 他 恒等式 
我 们 用 PaA Pi 来 表达 S.， 施 叙述 如 下 : 
= > ($) Pis, (5.3) 
-SCTP so 


证 明 提示 .对 于 给 定 的 值 Pms JE G.D 可 视 为 未 知 数 S, 的 线性 方程 ， 我 们 
要 证 明 (5. 3) 是 它 的 惟一 解 ， 若 把 〈5.3) RA Pa 的 表达 式 (3.1)， 则 右边 Pe 
(mkREN) 的 系数 是 


seven (2)()= (A) cue (of). (5.5) 


X b—mit, RAR (5. 5) TF1. 4komif, (5.5) Æ (1-1)! “的 二 项 展开 式 ， 
MAS. Alb, 将 (5.3) 代入 G.D 后 ， 即 得 恒等式 PL = Pry， 方程 G.D 的 
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解 的 惟一 性 是 根据 这 样 的 事实 : 每 个 已 的 方程 C.D 只 加 一 个 新 的 未 知 数 S,,， 故 
S, 可 以 逐步 地 算出 ， 我 们 可 以 用 类 似 的 方法 证 明 (5.4) 的 正确 性 . 


3. GHEE (Bonferroni) 不 等 式 

用 下 面 的 方法 可 以 得 出 有 关 Pm BP, 的 一 系列 不 等 式 . 如 果 在 (3.1) 或 
(5.2) 中 ， 只 保留 S ,9 9， 1 等 项 而 把 Spars Sp ON I HH, 则 其 
误差 ,( 即 真 值 减 去 近似 值 ) 的 符号 与 所 抹 去 的 第 一 项 的 符号 [ 即 (一 1)”」 A, B 
其 绝对 值 小 于 所 抹 去 的 第 一 项 的 绝对 值 ， 特 别 地 ， 当 r= 二 1 5 r=2 时 ， 有 


S, — (nm +1) Sper L Prey L Sms (5. 6) 
Sn M5 nui SP, AS,. (5. 7) 
证 明 提 示 .， 要 证 明 关 于 (3.1) 的 陈述 ， 只 须 证 明 : 对 每 一 个 :， 有 
d= (FS. 0. (5. 8) 
利用 (5.3) 将 不 等 式 6.8) 的 左边 写成 Peo 的 线性 组 合 ， 则 对 于 IRN, Pia 
系数 等 于 
yee (pG) (fever n). 
— mi\\v mis vom 
后 者 之 和 为 ( ”| ) ， 所 以 Pin USIN) 的 系数 是 正 的 ， 故 得 证 [参看 2. 12 节 


问题 13]， 关 于 更 深刻 的 不 等 式 , 读者 可 参考 本 章 开 始 时 曾 提 到 过 的 那 篇 弗 雷 谢 的 
RÄ. 


4.6 H 名 


S$: 本 节 恒 设 所 有 可 能 的 排列 都 是 等 概 的 . 

L 从 放 有 10 双 鞋 子 的 橱柜 里 任 取 4 只 鞋子 ， 试 求 所 取出 的 4 只 鞋 中 至 少 有 2 只 配对 的 

概率 . 

— yee 5 MEE. BOREL PAA 3 个 点 数 相同 的 概率 〈 并 用 2. 5 节 的 方法 验证 之 ). 

把 一 个 硬币 扔 5 次 ， 试 求 正 面 至 少 连 续 出 现 3 次 的 概率 . 

把 一 个 硬币 扔 10 次 ， 求 正面 至 少 连 续 出 现 5 次 的 概率 . 

在 上 述 两 题 中 ， 以 钥 子 代替 硬币 ， 勾 点 代替 正面 ， 求 其 相应 的 概率 . 

把 两 颗 锅 子 据 7 次 ， 试 求 在 对 于 (1,1),(2,2),…,(6,6) 中 ， 每 对 至 少 出 现 一 次 的 概 

Z p,. 

7, 一 副 桥 牌 中 的 四 同 ，4 张 面值 相同 的 牌 我 们 称 之 为 四 同 张 ， 因此, 一 副 13 张 中 可 以 有 0， 
1,2 或 者 3 个 四 同 张 ， 算出 对 应 的 概率 . 

8. 有 放 回 抽样 ， 从 一 个 具有 7 个 人 的 总 体 中 抽取 一 个 大 小 为 r 的 样本 . 求 出 NN 个 指定 的 人 人 
全 被 抽 在 样本 里 的 概率 u, [这 就 是 2. 11 节 问 题 12]. 


Auk Ye DM 
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11. 


12. 


13. 


14. 


15. 
16. 


17. 
18. 
19. 


20. 


21. 
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无 放 回 抽 样 . 在 现在 无 放 回 的 情形 回答 类 似 习 题 8 的 问题 ， 并 证 明 习 题 8 中 有 u,—> p~ 
(这 殊 是 2.11 广 问 题 3， 不 过 用 现在 的 方法 可 推出 一 个 完全 不 同 的 结果 试 证 它们 
恒 等 . ). 


.在 六 阶 行列 式 的 一 般 展开 式 中 ， 包 含 一 个 或 多 个 对 角 线 上 的 元 素 的 项 数 其 有 NIP, H 


中 Pi 由 d. 所 确定 . 

把 8 只 国际 象棋 的 车 放 在 棋盘 上 ， 使 得 彼此 都 不 能 被 吃 掉 而 且 没 有 一 个 在 上 自 色 的 对 角 线 
上 . 试 证 这 种 放 法 的 总 数 是 81(1 一 Pi)， 其 中 Pi; 由 (1.7) 所 定义 ， 而 N=8. 

一 个 抽样 (优惠 券 收集 者 ) 问题 ， 一 副 由 s 类 ， 每 类 有 nn 张 所 构成 的 牌 中 ， 每 一 类 都 标 有 
数字 1,2,…,n， 从 这 副 牌 无 放 回 地 抽取 一 个 大 小 为 ren 的 随机 样本 ， 算 出 每 一 个 标号 都 
由 现在 样本 中 的 概率 u,，( 把 这 情形 应 用 到 ;二 4,n 二 13 的 桥牌 中 去 ， 我 们 得 到 一 副 > 张 桥 
降 中 包含 全 部 13 种 面值 的 概率 ; 而 应 用 到 s=13,n=4 的 情形 中 去 ， 我 们 得 到 四 种 花色 都 
拿 到 了 的 概率 . ) 

( 续 上 题 )， 证明 当 s > off Au po(r,n)， 其 中 最 后 一 个 表示 式 由 (2.3) 所 定义 ， 这 
就 意味 着 : 在 极限 情形 ， 我 们 的 抽样 变 成 了 从 一 个 具有 数字 1,2,…,n 的 总 体 中 的 有 放 回 
的 随机 抽样 . 

( 续 上 题 )、 从 习题 12 的 结果 推出 : 当 rn， 有 

SE DEC) (ns — ks), = 0, 


k=O 


4 r=n 时 有 
一 1)* (2 ) Gs —ks), = s'n.. 


k=0 


用 求 
l eq eee ys yn 
Qa pet (1 一 (1 一 z)’) 
TE c=0 的 7 阶 微 商 的 办 法 验证 上 述 方程 . 
在 抽样 问题 12 中 , 求 出 恰巧 抽 次 就 得 到 了 全 部 数字 的 概率 .考虑 * 一 ce 的 极限 情形 . 
一 个 细胞 中 含有 NN 个 染色 体 ， 其 中 任意 两 个 之 各 部 分 都 可 以 交换 .如 果 发 生 了 > 对 交换 


(共有 (”) 种 不 同 的 方式 发 生 )， 求 出 恰 有 产 个 染色 体 卷 人 其 中 的 概率 ? 


从 一 副 纸 牌 中 ， 任 意 取出 5 张 ， 求 5 张 中 恰 好 缺少 & 种 花色 的 概率 . 

试 求 在 任 取 13 张 的 桥牌 中 ， 恰 有 对 同 花 的 爱 司 和 老 开 的 概率 . 

复 相合 ， 各 N 张 不 同 的 两 副 牌 ， 每 副 同 时 与 第 三 副 相 同 的 牌 进行 随机 相配 ， 求 恰 有 mm 个 
复 相合 的 概率 un, HAER N 一 co 时 ，w 一 1 [这 告诉 我 们 当 mel it, un 0) 

复 相合 ， 前 题 中 的 做 法 可 修改 如 下 : 从 2N 张 牌 中 任意 取出 N 张 ， 并 将 此 N 张 与 第 三 副 
牌 进行 随机 相配 ， 求 没有 一 个 相合 的 概率 ， 并 证 明 当 N 一 se 时 ， 这 概率 趋 于 1/e. 

复 相合 .在 习题 20 中 ， 若 将 两 副 牌 改 为 > 副 牌 ， 求 其 相应 的 概率 . 


1. 按 国际 象棋 规则 ， 车 可 吃 横 、 纵 直线 方向 上 的 棋子 ， 一 一 编者 注 
2. 当 N=6 的 情形 ， 参 见 [26]. 


22. 


23. 
24. 
25. 
26. 


4.6 J 题 


在 古典 占 位 问题 中 ， 恰 有 om PEAR 个 物体 的 概率 Pim (8) 是 
Pm = a COD Gow! Girt Gab (RI)? 
式 中 的 和 号 是 对 jem Aj<n, kj KA. 
TERS k=l 时， 第 2 节 最 后 一 段 的 叙述 是 正确 的 . 
在 波 司 - 爱 因 斯 坦 统计 中 ， 利 用 (3. 1) 可 导出 恰 有 m 个 空 盒 的 概率 . 
用 第 2 章 中 的 公式 《11. 14) 来 验证 24 题 中 所 得 到 的 公式 . 
对 N 作 归 纳 法 证 明 公 式 (1. 5). 
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第 5 草 条 件 概率 。 随 机 独立 性 


这 一 草 重新 开始 系统 地 讲述 概率 论 的 一 些 基础 知识 . 


5.1 条 件 概率 


条 件 概率 的 概念 是 概率 论 中 的 一 个 基本 工具 ， 然 而 不 幸 的 是 ， 由 于 使 用 了 个 别 
粗糙 的 术语 其 简明 性 反而 显得 不 清晰 了 . 下 面 的 讨论 是 用 一 种 比较 自然 的 方法 来 导 
出 其 形式 的 定义 . 

预备 例子 ” 设 在 N 个 人 的 总 体 中 ， 有 N, 个 色盲 者 而 且 有 Ns 个 女 的 . 若 事件 A 
友 电 分 别 表 示 随 机 选取 的 一 人 是 色盲 的 及 是 女 的 (随机 选取 的 定义 可 参见 第 2. 2 
节 )， 则 
_ Na _ Nu 

N’ N ` 
现在 ， 以 所 有 女人 组 成 的 子 总 体 代 苦 总 体 的 位 置 ， 我 们 来 计算 从 女人 中 随机 选 出 的 
一 人 是 色盲 的 概率 ， 这 概率 是 Nar/Na， 其 中 Nar 是 色盲 女人 的 数目 ， 这里， 我 们 没 
有 用 什么 新 的 概念 ， 但 是 ， 在 研究 某 个 特定 的 子 总 体 时 ， 我 们 需要 用 一 个 新 的 记号 
来 表达 ， 一 般 所 采用 的 符号 是 P(A|H},. With “EFH (所 选 出 的 人 是 女 的 ) 
发 生 的 假定 条 件 下 ， 事 件 A (ABR) 发 生 的 概率 ”采用 符号 


P(A | H) = RM = See (1.2) 


显然 ， 每 一 个 子 总 体 本 身 总 可 以 被 考虑 为 一 个 总 体 ， 为 了 语言 上 的 方便 ， 我 们 
说 一 个 子 总 体 时 ， 意 思 就 是 说 背后 还 有 一 个 较 大 的 总 体 ， 保 险 公 司 可 能 对 由 于 雷击 
(事件 A) 引起 的 要 固定 赔偿 的 灾害 频率 是 多 少 感 兴 趣 . 一 般 来 说 ， 保险 公司 的 保险 
项 目 有 好 几 类 ， 如 工业 的 、 都 市 的 、 乡 村 的 等 等 ， 单 独 研究 工业 项 目的 保险 旨意 味 
BARRE A 联系 于 事件 互 的 情况 一 “保险 费 是 花 在 工业 项 目 上 的 ”， 这 时 显 
然 可 以 应 用 公式 〈1.2)， 然 而 注意 : 对 于 一 个 只 经 营 工 业 保 险 的 保险 公司 来 说 ， 鳌 
与 整个 样本 空间 重合 ， 因 而 P(A HEK PA). 

最 后 ， 我 们 考虑 坐 在 北边 打 桥 牌 的 人 ， 一 副 桥牌 一 旦 分 好 了 以 后 ， 他 就 知道 手 
中 的 牌 ， 因 而 他 感 兴趣 的 是 剩 下 的 那 39 张 牌 的 分 布 ， 把 这 39 张 桥 牌 的 一 切 可 能 的 分 
布 的 集合 作为 样本 空间 是 可 以 的 ， 但是， 把 它们 和 北 家 手中 的 133 GF H) EK 
系 起 来 考虑 并 且 讨 论 假定 事件 HRA SAA (例如 南 家 手中 有 2 张 爱 司 ) 的 概率 
就 会 更 方便 一 些 . 仍 可 应 用 公式 (1. 2). 

类 似 (1.2)， 我 们 现在 来 引进 下 面 正式 的 定义 : 


P{A} P{H} (1.1) 
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定义 命 百 是 一 个 具有 正 概率 的 事件 ， 对 于 任何 事件 A， 我 们 记 


P{A | H} = aT (1.3) 


这 样 定 义 的 量 称 为 在 五 假设 下 (或 者 给 定 HW) A 的 条 件 概 率 ， 当 所 有 的 样本 点 都 是 
等 概 的 时 候 ，P{A| 瑟 ;就 是 A M H 的 公共 的 样本 点 的 数目 与 互 中 的 样本 点 的 数目 的 
比 Nan /Nu. 

当 条 件 假 设 五 的 概率 是 零 时 ， 条 件 概 率 P{A| 瑟 ) 就 没有 定义 了 . 在 离散 样本 空 
闻 的 情形 ， 这 一 点 是 无 关 紧 要 的 ， 但 是 ， 在 一 般 理 论 中 却 是 很 重要 的 . 

虽然 记号 P!A| 互 } 本 身 是 实用 的 ， 但 是 要 用 词句 表达 它 却 很 及 烦 ， 实 践 中 我 们 
采用 较为 简略 的 描述 ， 例 如 ， 在 上 面 所 提 到 的 例 中 ， 我 们 用 一 个 女人 是 色 育 的 概率 
的 描述 来 代替 “在 假定 已 知 为 女人 的 条 件 下 ， 随 机 选取 一 人 是 色 言 者 的 条 件 概率 ” 
我 们 经 常 以 “ 若 知道 五 已 发 生 ” 来 代替 “在 五 的 假定 下 ” 总 之 ， 我 们 的 公 云 与 记 
号 是 很 明确 的 ， 而 词句 的 表达 往往 是 非 正 式 的 ， 因 而 需要 读者 有 正确 的 理解 . 

为 了 称呼 上 的 清楚 和 起见， 对 样本 空间 中 的 概率 ， 有 时 我 们 用 绝对 概率 这 个 名 称 . 
严格 地 说 ,“ 绝 对 ”两 字 是 多 余 的 ， 可 以 路 去 . 

对 于 一 个 特定 的 假设 五 ， 考 虑 各 种 事件 的 条 件 概率 就 相当 于 把 瑞 视 为 一 个 新 的 
样本 空间 ， 并 且 ， 为 了 使 新 的 样本 空间 的 总 概率 为 1， 需 将 原 空间 中 所 有 事件 的 概率 
都 乘 上 因子 1/P{ 互 }， 这 种 表述 说 明 : 所 有 概率 的 一 般 定理 ， 对 在 任何 特定 假设 H 
下 的 条 件 概 率 依 然 成 立 ， 例 如 ， 我 们 可 以 叙述 A 或 B 或 二 者 同时 发 生 的 概率 的 基本 
关系 如 下 : 


PIAUBI|H}= P{A | H}+P({B| H}— P{AB | H}. (1.4) 
类 似 地 ， 第 4 章 中 关于 N 个 事件 有 nm 个 实现 的 概率 的 全 部 定理 改 为 条 件 概 率 的 情形 
也 仍然 成 立 ， 但 是 ， 我 们 并 不 需要 它们 . 
公式 (1. 3) 在 应 用 中 往往 以 下 述 形式 出 现 : 
P(AH} = P{A| H} + P{H}. (1.5) 
这 就 是 所 谓 复 合 概率 定理 ， 为 了 推广 到 三 个 事件 A,B,C 的 情形 ， 可 先 取 ABC 
为 假设 事件 ， 并 再 一 次 利用 公式 (1. 5)， 即 得 
P{ABC} = P{A | BC} + P{B| C} . P{C). (1.6) 
这 可 直接 推广 到 四 个 或 多 个 事件 的 情形 . 
最 后 ， 我 们 来 讨论 一 个 简单 而 又 常用 的 公式 ， 设 H o H, 是 一 组 完备 互 奈 事 
件 且 必 有 一 个 事件 发 生 〔( 即 H.-H, 之 并 集 是 整个 样本 空间 ， 且 Hoo H, ÆA 
不 相 容 的 )， 则 任何 事件 A 只 可 能 与 某 个 H KEARE., B 
A = AH, U AH, U + U AH,. (1.7) 
由 于 诸 AH, 是 互 不 相 容 的 ， 故 AKRZE AH, 的 概率 之 和 ， 再 利用 1.5) FHS 
H,, ， 即 得 
P{A}=DP(A|H,}P(H,). (1.8) 
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这 个 公式 是 很 有 用 的 ， 因 为 计算 条 件 概率 PIAA SAN BMRB RRBZPA 容易 
—- JEE, 

Gil (a) 无 放 回 抽样 从 一 个 拥有 7 个 元 素 1, 2 的 总 体 中 抽取 一 个 有 厅 的 样 
本 . Sie; 是 两 个 不 同 的 元 素 ， 假定 i 是 第 一 个 被 抽出 来 的 元 素 (事件 H), 第 二 
个 元 素 是 ;7 (事件 A) 的 概率 是 多 少 ? 显然 ，P{AH} 二 1/n(n 一 1),P(A|H}= 
1/(n—1). 这 说 明 : 第 二 次 抽取 是 对 于 具有 7 一 1 个 元 素 的 总 体 来 进行 的 ， 其 中 每 一 
个 元 素 被 抽 中 的 概率 相同 ， 事 实 上 ， 随 机 抽样 最 自然 的 定义 是 :“ 当 前卫 次 抽取 完成 
后 ， 剩 下 的 n 一 r 个 元 素 中 的 任何 一 个 在 第 r 十 1 次 被 抽取 的 概率 都 是 1/(n 一 r)”"， 这 
个 定义 等 价 于 第 2 章 所 给 出 的 定义 ， 但 是 我 们 不 能 在 较 早 时 叙述 它 ， 因 为 其 中 包含 
了 条 件 概 率 的 概念 . 

(b)4 个 球 连 续 地 放 进 4 个 盒 里 ， 全 部 44 个 排列 都 是 等 可 能 的 .给 定 前 两 个 球 放 
在 不 同 的 盒 中 (事件 H), ， 某 一 个 盒 恰巧 有 3 个 球 CSE A) 的 概率 为 何 ? 给 定 H, 


事件 A 有 两 种 不 同 的 方式 发 生 ， 所 以 P{AIH) =2 .4 一 去 .可 以 容易 地 直接 验证 


事件 A MIAH 分 别 包 含 12，4 和 12，2 个 样本 点 .) 

Cc) 性 别 的 分 布 ， 考 虚 恰 有 两 个 小 孩 的 家 庭 . 今 以 b,g 分 别 表 示 男 孩 或 女孩 ， 假 
定年 长 的 孩子 的 性 别 用 前 一 个 字母 来 表示 ， 则 有 4 种 可 能 的 情形 bb. bg,gb,gg. 这 4 
个 样本 点 的 每 一 点 都 赋 以 概率 1/4， 若 已 知 一 家 有 一 个 男孩 〈 事 件 H), MARA 
两 个 小 孩 都 是 男孩 (事件 A 的 概率 是 多 少 ?” 因 事件 AH 即 bb, mE H X bb 或 
bg 或 gb， 所 以 P(A] H}=1/3, MERRIE 互 的 所 有 家 庭 中 ， 大 约 有 1/3 WREE 
可 以 预期 发 生 事件 A， 这 是 很 有 趣味 的 ， 因 大 多 数 人 所 想像 的 解答 总 是 1/2， 事实 
上 ，1/2 却 是 另 一 个 不 同 问题 的 正确 解答 ， 这 问题 是 随机 地 遇 到 一 男孩 ， 并 发 现 他 
是 属于 有 两 个 小 孩 的 家 庭 ; 问 这 家 庭 的 另 一 个 小 孩 也 是 男孩 的 概率 为 多 少 ? 这 两 个 
问题 的 不 同 之 处 可 解释 如 下 ; 在 第 一 个 问题 中 ， 我 们 所 面临 的 是 一 系列 的 家 寿 ， 而 
第 二 问题 则 是 面临 着 一 系列 的 男孩 ， 对 于 后 者 ， 有 两 个 男孩 的 家 庭 共有 两 种 可 能 情 
况 ， 这 就 说 明了 这 两 个 结果 的 不 同 之 处 . 

(d) 分 层 总 体 ， 假 定 一 群 人 由 一 些 子 群 或 者 阶层 AW. A PA. REA 
民族 、 年 龄 、 职 业 等 等 ， 令 p 为 任 取 一 人 属于 H WER. w “H, 中 的 一 个 人 是 左 
撤 子 的 概率 是 g,”， 意思 是 指 :“ 在 此 人 属于 H; 的 假定 下 事件 A〈 左 撤 子 〉 的 条 件 概 
率 ” 随机 地 抽取 一 个 人 ， 他 是 左 撤 子 的 概率 为 Didi 十 加 qz 十 加 gs 十 这 是 (1. 8) 
的 一 个 特殊 情形 ， 假 定 此 人 是 左 撤 子 ， 他 属于 H, 的 条 件 概 率 为 


| — Pili (1.9) 
PAH, | A) Pi + PQ 十 
> 
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在 前 一 节 里 ， 我 们 认为 概率 当然 是 定义 在 样本 空间 中 的 ， 并 且 只 计算 了 一 些 条 
件 概率 ， 在 应 用 中 ,许多 实验 都 是 用 某 些 特定 的 条 件 概 率 (虽然 通常 把 形容 词 “ 条 
件 ” 省 略 了 〉 来 描述 ， 在 理论 上 这 意味 着 : 样本 空间 中 的 概率 可 由 给 定 的 条 件 概率 中 
推导 出 来 .曾经 指出 过 [5.1 节 例 (a)] 无 放 回 抽样 的 最 好 的 定义 是 : 不 管 前 > 次 抽 
取 的 结果 是 什么 ， 在 第 * 十 1 次 抽取 时 ， 剩 下 的 每 一 个 元 素 被 抽出 来 的 概率 都 是 一 样 
的 ， 类 似 地 ， 在 5. 1 节 例 (d) 中 ， 我 们 的 分 层 总 体 完全 被 若干 层 的 绝对 概率 p M 
每 一 层 中 的 特性 “ 左 撤 子 ”的 条 件 概率 g; 所 描述 ， 下 面 列 出 了 较 多 的 例子 来 局 示 一 
般 的 模型 ， 可 能 比 直 接 描述 更 有 效 . 

H (a) 在 第 1.5 节 例 (b) 中 ， 我 们 曾经 考虑 过 三 个 游戏 者 a,b,c 在 一 场 游戏 中 
互相 替换 的 问题 ; 我 们 曾经 描述 过 样本 空间 中 的 点 子 ， (HER AIR. MERTE 
定 这 场 游戏 这 样 进行 : 在 每 一 次 游戏 中 ， 任 何 两 个 对 手中 每 一 个 获胜 的 概率 都 是 
1/2， 虽然 这 种 叙述 并 未 包含 “条 件 概率 ”这 个 词 , 但 是 却 无 形 中 与 它 有 关联 ， 辟 如 
说 : 如果 某 游戏 者 a 参与 第 r 轮 (事件 互 )， 则 他 在 这 一 轮 获 胜 的 概率 是 1/2. 由 方 
程 〈1.5) 推出 ， 游 戏 者 a 在 第 一 次 和 第 二 次 游戏 都 获胜 的 概率 是 1/4， 用 符号 来 表 
ac, MÆ P{aa) 二 1/4， 重 复 地 应 用 (1.5) 可 证 : P{acc)=1/8,P{acbb}=1/16, % 
等 ， 即 是 ,方案 (x* ) 中 包含 r 个 字母 的 样本 点 具有 概率 2 “， 这 就 是 第 1.8 A 
5 中 所 赋予 的 概率 ， 但 是 现在 的 描述 更 直观 E 5.8 节 习题 14 中 继续 ). 

(b) 家 庭 ， 我 们 要 解释 下 面 的 叙述 : “一 个 家 庭 恰 有 上 个 小 孩 的 概率 是 p。( 其 中 
p= 二 1)， 对 于 每 一 个 家 庭 来 说 ， 所 有 的 性 别 的 分 布 都 是 等 概 的 . ” 令 b 表示 男孩 g 
RAE: 我 们 的 样本 空间 由 样本 点 0 (没有 小 孩 )， b, g, bb, bg, gb, gg, bbb, «+ Pr 2E 
成 ， 引 号 里 面 的 第 二 个 假定 可 以 更 明确 地 投 述 为 :如果 知道 该 家 寿 恰 有 个 孩子 ，2" 
个 可 能 的 性 别 分 布 中 的 每 一 个 都 具有 条 件 概 率 2“". 而 这 假设 的 概率 是 po TEA 
(1.5) 我 们 看 出 : ”个 字母 b 和 g 的 每 一 种 排列 的 绝对 概率 痢 是 p,。，2“. 

注意 这 是 分 层 总 体 的 一 个 例子 ， 孩 子 数 为 7 的 家 庭 构成 第 j 层 昌 ;， 作 为 一 个 例子 ， 
今 A 表示 事件 “该 家 庭 有 男孩 无 女孩 ”” 显 然 ， 其 概率 为 P(A})= 二 p12 + pd “十 …, 这 
是 (1.8) 的 一 个 特殊 情形 ， 在 这 种 情形 下 ， 假 设 H, 就 是 “家 庭 有 j 个 小 孩 "” WER 
(al: 如 果 知道 一 个 家 庭 没有 女孩 ， 该 家 庭 仅 有 一 个 小 孩 的 条件 ) 概率 是 多 少 ? 其 
中 A 是 假设 . 令 HRB MLA”, WAH 表示“ 一 个 小 孩 而 没有 女 护 ”， 
而 且 


P{AH} _ p2 


PIH AY = PIAY pd Fa be 


这 是 (1.9) 的 一 个 特殊 情形 . 
(c) 有 后 效 的 负 子 模型 ， 为 了 确定 起 见 ， 我 们 考虑 一 个 容易 出 事故 的 工业 系统 . 


(2. 1) 
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事 帮 的 皮 生 可 以 用 一 个 机 会 游戏 的 结果 来 描述 ， 一 个 负 子 里 有 黑 球 和 红 球 ， 在 每 一 
段 规定 的 时 间 区 间 里 随机 地 取 一 个 球 ， 红 球 代表 事故 出 现 . 如 果 事 故 出 现 的 可 能 性 
对 时 间 来 说 保持 不 变 ， 则 “ 鲍 子 的 成 分 ”是 常常 相同 的 . 但 是 可 以 想像 ， 每 一 个 事 
件 是 有 一 个 后 效 的 ， 可 增加 或 者 减少 一 次 新 的 事故 发 生 的 可 能 性 ， 这 对 应 于 一 个 成 
分 可 以 改变 的 罐子 ， 其 成 分 根据 依赖 于 顺 续 抽取 的 结果 的 某 种 规则 而 改变 ， 容 易 构 
造 这 样 一 个 规则 去 概括 各 种 情形 ， 但 是 ， 我 们 只 讨论 下 面 的 模型 : 

EZRA —-AHFPaASOABZRHr 个 红 球 .随机 地 抽取 一 个 球 . 看 了 颜色 
再 放 ， 并 且 还 要 另 加 进 c 个 与 所 抽出 的 球 具 有 同样 颜色 的 球 和 cd 个 相反 的 颜色 的 球 
(这 时 钠 子 中 就 有 rr 十 6 十 c 十 d 个 球 了 )， 这 种 手续 反复 地 进行 ， 其 中 c 和 d 是 任意 的 
整数 ，c 和 dd 可 以 取 为 负数 ,不 过 在 这 种 情形 下 经 过 有 限 次 取 球 以 后 会 因为 无 球 而 停 
IE. 特别 地 ， 取 c= 一 1,4d 二 0， 则 我 们 的 抽样 就 变 成 了 无 放 国 的 抽样 ， 它 在 r 十 6b 次 以 
后 就 结束 . | 

现在 ， 我 们 转向 数学 描述 . GR: 某 些 基本 的 概率 可 以 通过 它 所 确定 的 条 件 概 
率 来 计算 . 对 应 于 nn 次 抽取 的 样本 空间 的 典型 的 描述 法 是 用 个 字母 B 和 R 的 友 列 
来 代表 其 样本 点 ， 事 件 “ 第 一 次 取出 的 是 黑 球 ”( 即 是 第 一 个 字母 是 B 的 全 部 序列 所 
构成 的 集合 ) 的 概率 为 56/ (6 十 r)， 如 果 第 一 个 球 是 黑 的 ， 则 第 二 次 抽出 的 球 仍 为 尘 的 
(条 件 ) 概率 为 (6 十 c)/(6 十 r 十 c 十 dq)， 因此， 由 (1.5) AFIR, $ ELA BB 
开始 的 样本 点 的 全 体 ) 的 (绝对 ) 概率 为 

b b+c 

b+r b+rtc+d` 
序列 黑 ， 黑 ， 黑 的 概率 为 (2.2) FEV Cb+20)/(b+r+2ct+2d), FF. BR, AR 
种 办 法 可 以 算出 每 一 个 样本 点 的 概率 ，( 当 然 ， 当 cc 和 4 BRN, ROKR n DM 
选 得 足够 的 小 ， 以 避免 球 的 个 数 出 现 负 数 . ) 用 归纳 法 可 以 容易 地 验证 : 所 有 的 样本 
点 的 概率 的 和 必须 为 1. 

概率 的 显 式 表 达 式 不 是 很 容易 得 到 的 ， 除 非 在 下 面 要 介绍 的 一 个 最 重要 的 而 且 
著名 的 特殊 情形 : 

波 利 亚 锥 子 模 型 ， 其 特征 是 d 二 0,c>>0， 每 一 次 抽取 以 后 ， 这 时 与 取出 的 球 有 相 
同 颜色 的 球 的 数目 增加 ， 而 与 取出 的 球 的 颜色 不 同 的 球 的 数目 保持 不 变 ， 在 效 末 上 
看 ， 每 一 次 取出 的 球 是 什么 颜色 增加 了 下 一 次 也 取 到 这 种 颜色 球 的 概率 ， 因 此 ， 我 
们 得 到 了 一 个 如 传染 病 现 象 的 粗糙 的 模型 ， 其 中 ， 每 一 次 传染 以 后 都 增加 再 传染 的 
概率 ， 在 nn 次 抽取 中 ， 先 取出 mw 个 黑 球 后 取出 m 个 红 球 《ni 十 nn 二 n) 的 概率 是 


bbt co) (b+ 20) lbt neoe) e rlr+ oe(r 二 nc c) (2. 3) 
(b+r)(6trtod@btr+20-b+rt+n—c) 


(2.2) 


1. 用 龟 子 模型 去 描述 后 效 ( 传 染病， 似乎 是 由 波 利 亚 (Polya) HMM. 在 一 些 文献 中 讨论 的 许多 模 
型 都 把 他 的 方案 〈 最 初 在 [27] 中 引进 ) 作为 典范 ， 本 书 中 所 描述 的 模型 及 其 三 种 特殊 情形 是 由 弗 
ii (B. Friedman) (参见 [28D 所 提出 . 
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BE n THRA n ARER, m 个 红 球 的 其 他 抽取 次 序 ， 计 算 其 概率 ， 发 现 因子 是 相 
同 的 ， 只 是 排列 的 次 序 不 同 ， 因 此 可 得 到 抽出 n PSR ERA nm 个 红 球 的 所 有 可 能 的 抽 


取 方 式 具有 相同 的 概率 ， 此 为 波 利 亚 模型 在 分 析 上 的 简明 性 ， 分 子 分 母 同 乘 以 (”)， 


Tl 
即 所 有 排列 的 数目 ， 利 用 广义 二 项 式 系 式 得 下 列 形式 ; 
(mit Oley (me I rie (ey re) 
"Mı 71 2 ny No 


Prin = TT A 一 TD (2.4) 


n 7 


( 波 利 亚 模型 在 问题 18 一 24 中 继续 讨论 ， 还 可 参看 第 17. 10 %3 9 9 和 10. ) 

除了 波 利 亚 模型 以 外 ， 我 们 的 罐子 模型 还 包含 另 一 个 有 趣 的 特殊 情形 ， 即 十 : 
两 个 隔离 壁 之 间 热 交换 的 爱 伦 费 斯 特 (Ehrenfest) 模型 ”如 物理 学 家 所 应 用 的 
那样 ， 在 最 初 的 描述 中 ， 爱 伦 费 斯 特 模 型 考虑 的 是 & 个 质点 分 布 于 两 个 容器 中 的 情 
形 ， 随 机 地 选取 一 个 质点 把 它 由 它 所 在 的 容器 移 到 另 一 个 容器 中 去 ， 这 种 手续 反复 
地 进行 ， 问 nn 步 以 后 质点 的 分 布 如 何 ? 为 了 把 它 化 成 色 子 模型 ， 只 需 把 第 一 个 容 帮 
中 的 质点 叫 作 红 球 ， 第 二 个 容器 中 的 质点 叫 作 黑 球 ， 于 是 在 每 一 次 抽取 中 ， 球 抽出 
来 后 青 换 上 一 个 相反 的 颜色 的 球 ， 即 是 c= 一 1,4d 二 1， 显 然 ， 在 这 种 情形 下 ， 这 种 过 
程 我 们 要 继续 多 久 就 可 以 继续 多 久 如果 没 有 红 球 ， 则 自动 地 抽出 一 个 黑 球 并 换 进 
一 个 红 球 ). [在 第 15. 2 节 例 〈f) 中 ， 我 们 将 用 另 一 种 方法 讨论 埃 伦 费 斯 特 模型 . ] 

Xt c=0,d>0 的 特殊 情形 ， 曾 经 由 弗 雷 德 曼 提 出 作为 一 个 安全 运行 模型 .每 当 友 
生 了 事故 ( 即 红 球 被 取出 )， 安 全 运行 就 抓紧 一 些 ， 而 当 没 有 事故 发 生 时 ， 安 全 运行 
就 放松 一 些 ， 于 是 发 生 事故 的 概率 就 增 大 . 

(d) 层 迁 的 友子 模型 ， 假 传染 ， 为 了 继续 沿 着 上 一 个 例子 的 线索 进行 讨论 ， 我 们 
假定 每 一 个 人 都 可 能 遇 到 意外 事故 ， 而 且 它 们 的 发 生 取 决 于 从 一 个 镀 子 中 随机 地 取 
一 个 球 所 得 的 结果 . 然而 ， 这 时 我 们 假定 是 无 后 效 的 ， 所 以 ， 缸 子 中 的 成 分 在 整个 过 
程 中 保持 不 变 ， 因 为 意外 事故 出 现 的 机 会 或 倾向 性 可 能 会 因 人 之 不 同 而 不 同 ， 会 因 
职业 之 不 同 而 不 同 ， 所 以 我 们 设想 每 一 个 人 “或 者 每 一 种 职业 ) BAA CMT. 
为 了 避免 不 必要 的 复杂 性 ， 我 们 假定 只 有 两 种 人 (或 其 种 职业 )， 市 且 其 数目 之 比 为 
1 : 5， 然 后 ,我 们 考虑 第 一 个 龟 子 含有 六 个 红 球 与 bb PERR, BARTRA r 个 
红 球 与 b, 个 黑 球 . “随机 地 选取 一 个 人 ， 并 考察 他 在 对 个 单位 时 间 内 发 生 了 多 少 次 意 
外 事故 ”与 下 述 实验 相当 : BBR. MRA SHR, Wiese: 否则 选 第 二 
缸 ， 在 每 一 种 情形 下 ， 都 是 从 这 罐子 中 作 2 次 有 放 回 的 随机 抽取 我们 的 实验 摘 述 
了 一 个 保险 公司 接受 新 的 保险 户 时 应 做 的 瑞 钢 . 

利用 〈1. 8) ， 我 们 得 出 : 第 一 次 抽出 的 球 是 红 的 概率 为 


i . ry Ə . r? 
PR E 6 b, +r) t 6 b, -+ r, (2. 9) 
而 序列 红 ， 红 (RR) 的 概率 为 
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PIRR) = (i) +2. (— 2). (2. 6) 


在 我 们 的 模型 里 ， 并 没有 包含 什么 数学 问题 ， 但 是 ， 它 却 具 有 一 个 很 有 趣 的 性 
质 ， 这 种 性 质 在 应 用 中 会 引起 很 大 的 混乱 ， 假 定 我 们 的 保险 公司 观察 出 ;一 个 新 的 
保险 户 在 第 一 年 中 发 生 了 一 件 意外 事故 ， 从 而 他 关心 这 一 个 新 的 保险 户 在 第 二 年 发 
生意 外 事故 的 概率 ， 换 名 话说， 假定 第 一 次 抽出 的 是 红 球 ， 我 们 问 序列 RR 的 〈 条 
件 ) 概率 是 多 少 ” 显然 ， 比 P{RR}/P(R} 不 等 于 PR)}， 为 了 解释 这 一 点 ， 我 们 假定 
r,/(h +r, )=0. 6 A r/C 十 疡 ) 一 0.06. 于 是 在 任 一 次 抽取 中 ， 取出 红 球 的 概率 为 
0. 15， 但 是 ， 如 果 第 一 次 抽出 的 是 红 球 ， 则 第 二 次 抽出 的 仍然 是 红 球 的 概率 为 0. 42. 
注意 : 我 们 的 模型 在 整个 的 总 体 中 是 无 后 效 的， 但 对 一 个 随机 地 选 出 的 人 来 说 ， 他 
发 生 了 一 件 意 外 事故 以 后 会 增加 此 人 发 生 第 二 次 意外 事故 的 可 能 .， 这里， 我 们 得 到 
了 抽样 的 影响 ， 一 次 意外 事故 的 发 生 并 不 真 的 产生 什么 影响 ， 但 是 它 却 指出 随机 地 
选 出 的 人 发 生意 外 的 可 能 性 有 增 大 的 倾向 ， 为 此 ， 后 续 观 察 结果 会 使 我 们 获得 对 将 
来 的 预测 的 改善 ， 虽 然 实际 上 这 种 将 来 一 点 也 不 被 过 去 所 影 啊 . 

在 统计 文献 中 ， 习 惯 于 用 传染 这 个 词 来 代替 后 效 ， 抽样 表 面 上 的 后 效 性 最 初 误 
解 为 其 实 的 传染 效果 ， 所 以 统计 学 家 现在 说 到 传染 (或 传染 概率 分 布 ) 时 都 是 含糊 
不 清 的 . 例如 ， 生 态 学 家 在 田野 里 找寻 昆虫 . 经 过 长 时 间 的 搜寻 他 找到 了 一 个 昆虫 ， 
他 会 断言 有 巢穴 ， 大 概 在 附近 ， 而 且 他 再 找到 一 些 昆虫 的 机 会 是 很 大 的 . 换 句 话 
说 ， 在 实际 中 每 一 次 成 功 将 加 大 下 次 成 功 的 概率 ， 然 而 这 仅 是 因为 样本 给 我 们 提供 
了 增加 了 的 信息 量 而 已 显然， 这 其 中 并 未 包含 任何 后 效 性 ， 统 计 学 家 把 这 个 说 成 
是 传染 ， 这 是 务 于 引起 计 会 的 . 

(e) 下 面 的 例子 是 很 著名 的 ， 同 时 具有 例证 的 作用 ， 只 可 惜 有 些 人 为 造作 ， 设 想 
一 个 总 体 中 有 N 十 1 MBF, SEES EBA ON TER, ER k SHEP PRR TARS 
N 一 k 个 白 球 (4 二 0,1,2,…,N). 今 从 NN 十 1 MEREEBRH HB, HMPA 
放 回 的 nn 次 抽取 .假设 取出 的 个 球 都 是 红 球 (事件 A)， 求 在 下 一 次 (第 nn 十 1 次 ) 
仍然 取出 红 球 (事件 B) 的 (条 件 ) BE. WAKA ER eS. WEAR 
n 次 取 球 中 都 出 现 红 球 的 概率 是 (k/N)”".， 因 此， 由 a.D 我 们 有 
_ 了 十 2 二 十 入 


PIA) N?* (N+ 1) 2.7) 
事件 AB 表示 相继 (n +1) 次 取 球 中 都 出 现 红 球 ， 于 是 有 
PLAB) = PIB) = 1 +2 te ENO (2.8) 


N" (N+ 1) 
故 所 求 的 概率 是 P {B| A} =P {B} /P {A}. 
Al (2.7) 与 2.8 可 考虑 为 近似 于 积分 的 黎 曼 和 .因此 ， 当 NN 相当 大 时 ， 有 


| N N 1 1 
Pi A} = _ x" dx ipl: (2.9) 


o l — ain 
FID] N+ 二 1 nt 
故 对 足够 大 的 NN， 把 类 似 的 计算 用 到 (2. 8〉 中 去 ， 我们 有 
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P(B | A) ~ E, (2.10) 


公式 (2.10) 可 粗略 地 解释 如 下 : AEP Pe SRR. HE n RAR 
取 球 中 都 出 现 红 球 ， 则 在 第 nn 十 1 次 取 球 中 仍然 取 中 红 球 的 概率 是 (xn 十 1)/(n 十 2)， 这 
就 是 所 谓 拉 普 拉 斯 (1812〉 延续 律 . : > 

关于 贝 叶 斯 (Bayes) 公式 的 附注 .在 (1.9) 5 (2.2) 中 ,我 们 曾经 直接 从 定义 出 发 来 
计算 某 些 条 件 概率 ， 我 们 建议 ， 初学 者 最 好 这 样 做 ， 而 不 要 去 死记 我 们 现在 将 要 导出 的 公式 
(2. 12)， 公 式 (2.12) 追溯 到 我 们 曾 讲 过 的 特例 的 普遍 情形 ， 其 实 它 仅 是 公式 (1.3) 的 万 一 
种 写法 ， 设 有 一 组 完备 互 斥 事件 Hi,H;,…， 即 每 一 个 样本 点 必 属 于 一 个 而 且 也 只 能 属于 一 个 
H;， 则 我 们 所 感 兴趣 的 是 


P{AH, } 
P(A) ` (2.11) 


P{ H, | A} = 
wA (1.5) 与 (1.8) 代入 (2.11), WA 
PIA | Hy} Pi) 
P{H, | A} = -二 -全 SS. 
> P(A | H;}P{H,) 
若 将 事件 H, 称 为 原因 ， 则 (2. 12) 成 为 “关于 原因 概率 的 贝 叶 斯 法 则 ” 在 数 党 上 ，《〈2. 12) 
不 过 是 公式 (1.3) 的 一 种 特殊 写法 而 已 ， 而 在 上 述 例 (b) 与 Cd) 所 描述 的 类 型 的 许多 统计 
应 用 中 ， 公式 (2. 12) 是 很 有 用 的 ， 但 遗憾 的 是 ， 由 于 对 例 〈e) 类 型 的 结果 形式 地 乱用 ， 以 
致使 员 时 斯 公式 不 被 人 信任 . 在 实践 中 ， 这 种 论证 可 能 出 毛病 . 一 个 质量 控制 的 工程 师 关 心 的 
是 某 架 指定 的 机 器 ， 而 不 管 这 架 机 器 是 否 是 从 无 穷 多 个 机 器 的 总 体 中 任意 抽取 出 来 的 ,仅仅 是 
基于 逻辑 上 的 可 以 接受 同时 又 附 合 我 们 的 想法 ， 他 就 采用 贝 叶 斯 公式 . 普拉多 (Plato) BA 
这 种 论证 来 证 明 大 西洋 的 存在 ， 而 哲学 家 们 用 它 来 证 明 牛 顿 力学 的 荡 雇 ， 但 是 对 于 我 们 工程 
师 来 说 这 种 论证 忽略 了 如 下 的 情况 ， 工程 师 期 望 成 功 ， 并 且 他 可 以 估计 与 减 小 来 自 了 预测 和 和 猜 
测 的 各 种 错误 ， 以 便 作 得 更 满意 ， 近 代 统 计 检 验 与 统计 估计 的 方法 虽然 较 少 直观 性 ， 但 左 实 
在 ， 因 此 ， 它 不 仅 是 被 证 明 为 正确 的 ， 且 事实 上 可 以 应 用 . 
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在 上 面 诸 例 中 ， 条 件 概率 PA H RETRETAR P(A}. fA a, F 
件 吾 是 否 发 生 的 信息 会 改变 我 们 对 事件 A HE. RAY P(A) 本 一 PA 时 ， 
这 种 信息 才 不 能 影响 我 们 对 于 事件 A 的 发 生 与 否 的 推 起 .这 时 ， 我 们 就 说 : ASA 
是 随机 独立 的 . 但 公式 〈1.5) 表明 了 条 件 P{AITH} 二 =P{A} 可 以 写成 如 下 的 形式 : 
PAH) = P{A} . PIH}. (3.1) 
这 等 式 关于 A 与 日 是 对 称 的 ， 并 且 还 说 明 当 A 与 理 随 机 独立 , HA 也 随机 独立 . 
因此 ， 我 们 最 好 是 从 下 面 对 称 的 形式 来 下 定义 : 
定义 1 两 个 事件 A 与 昌 称 为 是 随机 独立 的 (或 简称 独立 )， 若 等 式 (3.1) 成 
立 ， 当 P{H} 二 0 时 ,虽然 P{A| 互 ) 是 没有 意义 的 ， 但 此 定义 仍 可 采用 .统计 独立 是 
随机 独立 的 同义词 . / 


(2. 12) 
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例 〈a) 从 一 副 纸牌 中 任 取 一 张 ， 由 于 对 称 的 理由 ， 我 们 可 期 望 出 现 “ 黑 桃 ” 的 
事件 与 出 现 “ 爱 司 ”的 事件 是 独立 的 . 事实 上 ， 它 们 的 概率 分 别 是 1/4,1/13， 而 它 
们 同时 发 生 的 概率 确 是 1/52. 

(ORRAT. “PERT HLA” WFS “BBR THEA” 
的 事件 是 独立 的 . 因为 这 两 事件 同时 发 生 的 概率 是 3/36= 二 1/12， 而 这 正 是 它们 分 别 
的 概率 1/6 与 1/2 之 积 . 

(QF Casb,c,d) 四 个 字母 的 排列 中 ，“a 在 6 前” 与“c 在 4 前 ”是 独立 的 .这 
在 直观 上 是 显然 的 ， 并 且 也 容 匈 验证 . 

(d) 性 别 分 布 ， 我 们 回 到 5.1 节 例 (c),， 但 现在 所 考虑 的 是 有 三 个 小 护 的 家 星 ， 
并 假设 所 有 八 种 可 能 情况 bbb,bbg,…,ggg 各 有 概率 1/8. S Ae “RBBB 
有 ”的 事件 ,而 A 是 “家 里 至 多 有 一 个 女孩 ”的 事件 . 于 是 P{H}=6/8, P(A)= 
4/8, AFH 同时 发 生意 味 着 有 如 下 可 能 bbg,bgb,gbb, 所 以 P{ AH} =3/8=P{A} X 
P{ 昌 }， 于 是 ， 在 家 庭 中 有 三 个 小 孩 的 情况 下 ， 这 两 个 事件 是 独立 的 . 但 是 ， 当 所 考 
虑 的 家 庭 有 两 个 或 是 四 个 小 孩 时 ，A 与 H 就 不 再 独立 ， 这 说 明了 是 否 具 有 独立 性 并 
不 总 是 显然 的 . 

EP HRE, MEXR H 就 不 发 生 ， 反 之 亦 然 ， 随机 独立 性 隐 含 着 不 能 从 
事件 互 的 发 生 作出 对 事件 4 的 任何 推断 ， 因 此，A 与 五 的 独立 性 也 就 是 A 与 五 的 
独立 性 《由 于 对 称 性 ，A 与 理 及 A 与 及 ' 也 是 独立 ). 利用 已 {H 二 1 一 P {H} 就 
很 容易 验证 这 个 结论 ， 若 公式 (3.1) RZ, W (A AH =A—-AH) 

P{AH’} = P{A} — P{AH} = P{A} — P{A}P{H} 
= P{A}P{H’)}, (3. 2) 
这 正 是 我 们 所 期 望 的 ， 
现在 ， 设 三 个 事件 A,B 与 C 是 两 两 独立 的 ， 于 是 
P{AB} = P{A}P{B}, 
P{AC} = P{ASPiC}, (3. 3) 
P{ BC} = P{B}P{C}. 
人 人 们 可 能 猜想 ， 两 两 独立 总 会 隐 含 着 像 AB SC 那样 的 一 对 事件 的 独立 性 . 但是， 这 
不 一 定 对 ， 我 们 可 以 举 出 反例 说 明 (3. 3) 虽然 成 立 而 PCABO=0. 从 而 AB AC # 
不 会 独立 了 . 这 种 情况 很 少见 ， 直 到 伯 因 斯 坦 构造 过 一 个 人 工 的 例子 人 们 才 发 更 了 
这 种 可 能 性 .然而 现实 中 仍然 是 可 行 的 例子 . 
例 〈e) 考 虑 字母 ac 的 6 个 排列 ， 再 加 上 3 个 三 元 组 laaa), (0,650) CC, 


OR 9 个 三 元 组 构成 一 个 样本 空间 ， 对 此 样本 空间 中 每 一 个 样本 点 赋 概 厄 ， 令 A 是 
字母 a 出 现在 第 个 位 置 (&=1,2,3) 的 事件 ， 显 然 此 三 事件 中 每 一 事件 之 概率 均 为 
] 
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P(A A} = P{A A) = P{A,A,} = = 


cL Sep A ARS, [PEH PAAA) = BUS PR (A, MA, 
都 发 生殖 涵 了 A RE), WA 与 ALA, 并 不 独立 ， 

我 们 还 可 举 更 多 的 例子 ， 令 B 和 C 分 别 表 字母 Alc 分别 在 第 k 个 位 置 ， 我 们 
可 得 9 个 事件 而 每 一 事件 的 概率 都 是 二， 显然 ! P{C, B,} =i, MARE, REC 
与 B, 的 下 标 j 承 &， 两 事件 独立 ， 另 一 方面 ， 出 现在 前 两 个 位 置 的 字母 惟一 地 决定 于 
出 现在 第 三 个 位 置 的 字母 ， 所 以 C; 与 下 述 9 个 事件 中 的 任何 一 个 都 不 独立 ， 这 9 个 
事件 是 前 两 个 位 置 出 现 字母 5 和 上 的 不 同 排列 ，B,B,,…',CiC:” 在 第 9 章 第 1 节 我 们 


还 要 回 过 头 研究 这 个 例子 .5. 8 节 习 题 26 中 还 进一步 提供 了 一 些 例子 . > 
要 使 随机 独立 性 的 概念 合理 ， 除 〈3. 3) 必需 满足 外 ， 还 要 添加 下 面 的 条 件 : 
P{ ABC) = P{A}P{B}P{C}. (3. 4) 


这 等 式 保证 了 A BC 的 独立 性 ， 并 且 也 保证 了 ， 吕 与 AC，C 与 AB 独立 .甚至 还 
可 以 证 明 AUB 与 C 也 是 独立 的 ， 事实 上， 由 第 1 章 的 基本 关系 式 (7. 4)， 我 们 有 
P{(A U BC} = P(AC} + P{BC} — P( ABC}. (3.5) 
把 (3.3) 与 3.4 RA (3.5) 的 右边 ， 则 可 去 掉 一 个 公共 因子 PCC), MRP 
因子 是 P(A}; 十 P41B; 一 P(AB}; 二 P(AUB);， 于 是 
P{(A U B)C} = P{A U B}P{C). (3. 6) 
这 样 一 来 ， 可 以 相信 ， 在 两 个 条 件 (3.3) 和 3.4 成 立 之 下 ， 可 以 毫 无 困难 
地 证 明 : 凡 能 用 A 和 B 的 组 合 所 表示 的 事件 均 与 C 独立 . 
定义 2 SHA, A A, 称 为 相互 独立 的 ， 如 果 对 所 有 可 能 的 组 合 1 委 i<j)<< 
ken, AF ORERMER SE: 
P{AA;}=P{A,}P{A;}; 
P{A,A,A,}=P{A;} P{A,} P(A,}, (3.7) 


P(A =A, }= PIA, PI A) PA) 
第 一 行 代表 ( ” ) 个 等 式 ， 而 第 二 行 代表 ( ? ) 个 等 式 ，……， 等 等 ， 因 此 ， 所 要 满 


足 的 条 件 共 有 (%) 二 (3) 十 …(”)= a+- (“一 (0)=2" 一 x 一 1 个 另 一 方面 


— 


. 自 此 以 后 至 例 〈e) 结束 ， 原 书 将 CREDA A. PERTE. —— EAE 

. 一 般 的 -元 组 Cr > 3) 的 构造 .样本 空间 共 〈r! tr) 个 样本 点 ， 其 中 有 r! 个 由 7 个 符号 
ay,wr 构 成 的 排列 ， 另 > 个 是 全 为 a 的 -元 组 (1 一 1,…,r)， 对 前 一 类 排列 中 每 个 赋 概 
1/2 (r 一 2)1， 而 对 (ajata) 赋 概 Lr. SA Ba 在 第 个 位 置 出 现 ， 则 (A) 两 两 独 
立 ， 但 任意 三 个 都 不 相互 独立 ， 


[I> 
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第 一 行 的 { ” ) 个 条 件 足 以 保证 这 些 A, 的 两 两 独立 性 ， 方程 组 GD 看 起 来 似乎 是 一 


个 复杂 的 条 件 组 . 但 是 ,它们 的 成 立 往往 是 明显 的 ， 而 且 不 需要 验证 .由 归纳 法 可 
” 知 [ 从 n=2 和 (3.2) HEI: 

在 定义 2 中， 系统 (3.7) 可 以 由 2” 个 方程 所 构成 的 系统 来 代替 ， 这 些 方程 组 是 
从 3.7) 的 最 后 一 个 方程 把 任意 个 A 换 为 它们 的 互补 事件 A; 而 得 出 的 . 

两 两 独立 与 相互 独立 的 区 别 在 理论 上 的 意义 远 胜 于 实际 上 的 意义 . 


5.4 ”乘积 空间 ，。 独立 试验 


我 们 终于 到 了 该 引进 经 验 术语 的 数学 表述 的 时 候 了 ， 这 些 经 验 术 语 有 连续 试验 ， 
重复 观察 ， 两 个 样本 的 合并 ， 两 个 试验 的 组 合 和 把 它们 作为 全 体 的 一 部 分 来 处 理 等 
等 ， 特 别 地 , “独立 试验 ”对 应 于 直观 概念 中 的 “在 相同 条 件 下 的 重复 试验 ”， 这 是 
概率 论 中 的 一 个 基本 概念 ， 以 下 还 将 要 用 许多 例子 来 说 明 它 的 实际 意义 . 

首先 引进 一 个 没有 什么 概率 意义 的 概念 ， 两 个 集合 A 和 B 的 组 合 乘 积 是 一 个 集 
合 ， 该 集合 由 A，B 中 的 元 案 的 有 序 对 C.D 的 全 体 所 构成 ， 证 此 组 合 乘积 为 A, 
B! 此 定义 可 推广 到 三 个 集合 的 组 合 乘 积 (4A,B,C)， 四 个 集合 的 组 合 乘积 (A,B, 
C,D)， 甚 至 无 穷 多 个 集合 的 组 合 乘积 . 

组 合 乘积 这 一 概念 是 如 此 的 自然 ， 以 致 此 前 我 们 就 已 含蓄 地 用 过 多 次 ， 例如 ， 
扔 三 次 硬币 的 理想 实验 ， 可 以 用 含 8 个 样本 点 的 样本 空间 来 描述 ， 这 8 个 样本 点 就 十 
字母 H 和 T 的 8 个 三 元 组 ， 这 就 是 说 : 样本 空间 是 三 个 空间 〈 集 合 ) HARE, 
其 中 每 个 由 两 个 点 (或 元 素 ) H 和 工 所 构成 ， 更 一 般 地 ， 当 说 及 二 个 相继 的 试验 时 ， 
我 们 指 的 是 一 个 样本 空间 驴 ， 其 中 的 点 代表 可 能 结果 对 ， 从 而 SS 是 对 应 于 两 次 单个 
试验 的 两 个 样本 空间 的 组 合 乘积 ， 任 给 两 个 具有 样本 空间 Q 和 8 的 理想 实验 ， 可 考 
虑 它们 是 同时 做 的 或 相继 做 的 .后 者 要 求 考虑 全 部 可 能 结果 对 ， 也 就 是 说 ， 要 引进 
组 合 乘积 空间 (UG) 来 作为 新 的 样本 空间 ， 于 是 问题 出 现 了 ， 如 何在 新 的 样本 空 
间 中 引进 概率 ? 回答 是 随 情 况 而 变 的 ， 考 虑 此 问题 以 前 ， 先 给 出 两 个 例子 ， 它 们 可 
DAHA, RRR TT AY ARIA. 

例 (afi JL (Cartesian) 空间 ， 当 平面 上 的 点 用 一 对 实数 Coy) 表示 时 ， 平 
面 就 变 成 了 两 个 轴 的 组 合 乘积 ， (平面 几何 可 以 不 用 坐标 来 研究 ， 说 明 同 一 空间 可 以 
用 不 同 的 观点 来 考虑 . ) 具有 点 (zyyz) 的 三 维 空间 可 以 考虑 为 三 个 轴 的 三 元 组 合 
乘积 也 可 以 考虑 为 +,y- 平 面 和 zz 轴 的 组 合 乘积 . 

在 平面 上 ， 满足 条 件 0 二 x 二 1 和 0<y<1 的 点 集 是 两 个 单位 区 间 的 组 合 乘积 . 
六 意 ， 这 种 表示 法 并 不 是 对 任意 集合 都 是 可 行 的 ， 例 如 三 角形 和 椭圆， 最后， 还 要 
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指出 : FE (x,y,z). 空间 中 ， 上 述 二 个 不 等 式 定义 出 一 个 以 正方 形 为 底 的 无 穷 柱 集 . 
更 一 般 地 ， 在 空间 中 ， 任 一 集合 当 其 定义 仅 包 含 x Al y- sweet, 可 视 其 为 以 生成 集 
为 底 的 平行 于 xz- 轴 的 柱 集 . 

(b) 字 母 表 和 词 . SA 由 26 个 标准 字母 所 构成 ， 则 三 重 积 A,A, A) 是 字母 的 
全 部 三 元 组 ， 或 者 说 是 全 部 “三 个 字母 ”的 词 . 这 种 观点 已 用 于 通信 和 编码 理论 ， 
但 考虑 词 具 有 固定 长 度 就 不 自然 了 . 和 确实， 只 有 添加 一 个 新 的 分 离 符 号 〈 空 日 ) 于 
字母 ， 任 意 长 的 信息 才能 考虑 . 因此， 再 没 必 要 引进 “ 词 ” 的 长 度 的 任何 假设 . 任 
一 有 限 信息 可 以 视 为 一 个 无 限 信息 的 开头 ， 恰 如 任 一 已 写 的 词 可 假想 是 一 个 序列 的 
开头 一 样 ， 附带 地 说 ， 通 信 理 论 应 用 任意 长 的 码 ， 正 是 在 它 的 影响 下 ， 现 在 通行 
是 用 任意 多 个 字母 符号 来 表达 一 个 字母 表 . 在 这 种 意义 下 ， 人 人 和 们 用 “信息 ”或 者 长 
为 n 的“ 词 ”来 描述 nn 次 重复 试验 的 结果 . 

MR S 为 任 一 由 样本 点 EE, err 构造 的 样本 空间 ， 则 忆 WM n BA HERR 
(S,S,:,©) 考虑 为 以 全 为 样本 空间 的 试验 的 n 次 重复 试验 的 样本 空间 .一般 来 
说 ， 用 形 如 (zi ,…,x,) 的 符号 来 表示 其 中 的 点 是 很 方便 的 ， 此 处 zx; S 中 的 一 个 
点 ， 在 例 (Ca) 中 ,通常 x; 表示 为 坐标 . 当然， 术语 “集合 ”与 “事件 ”可 互相 交 
换 ， 一般 地 ,“ 仅 依赖 于 前 两 次 试验 的 结果 ”的 事件 称 为 “ 仅 依赖 于 前 两 个 坐标 ”的 
集合 ， 

前 已 论 及 ， 所 有 这 些 符号 和 概念 均 可 推广 到 无 究 序列 中 去 . 概念 上 ， 这 无 任何 
困难 .十进制 数 3. 1415… 表 示 数 字 7 为 无 穷 乘 积 空间 中 的 一 个 点 ， 除 了 人 们 宁愿 说 
E n 位 小 数 而 不 愿 说 第 nn 个 坐标 以 外 . 无穷 腾 积 空间 是 概率 论 中 自然 、 习 惯 的 用 语 . 
扔 一 个 硬币 不 需要 特定 扔 多 少 次 ， 一 个 随机 徘徊 不 需要 特定 多 长 .如果 我 们 暗中 参 
考 一 个 无 穷 的 试验 序列 ， 那 将 使 理论 变 得 更 具 弹 性 ， 更 加 简单 ， 并 把 注意 力 引 问 仪 
依赖 前 面 少数 儿 次 试验 的 事件 .遗憾 的 是 ， 这 种 形式 上 简单 又 很 圆满 的 处 理 需 要 测 
度 论 的 知识 和 技巧 ， 本 卷 书 仅 提 供 概率 论 的 基本 概念 ， 不 想 被 技术 上 的 困难 所 干扰 
和 模糊 主 央 .为 了 这 个 原因 ， 本 书 只 限于 讨论 离散 的 样本 空间 ， 这 就 要 求 研 究 的 试 
验 仅 限于 有 限 多 次 ， 这 就 意味 着 ， 为 了 技术 上 简单 ， 我 们 只 处 理 并 未 特 乍 的 或 变化 
的 样本 空间 . 这 种 结果 ， 虽 然 理论 上 不 太 令 人 满意 ， 但 它 有 实际 效 打 . 

现在 转 而 讨论 在 乘积 空间 中 赋 概 的 问题 ， 第 2 节 中 的 各 种 摊子 模型 ， 可 以 用 重 
复试 验 来 表述 ， 而 且 我 们 已 经 看 到 : 可 以 用 条 件 概率 的 方式 来 定义 不 同形 式 的 概率 . 
直观 地 说 ， 可 以 想像 试验 之 间 有 各 种 形式 的 联系 ， 但 是 ， 独 立 试验 或 更 一 般 些 独立 
实验 这 一 概念 的 重要 性 ， 是 其 他 概念 难以 超过 的 . 

为 了 确定 起 见 ， 考 虑 两 个 样本 空间 U 和 路， 它们 分 别 由 样本 点 asa. Ml 
Bi > Bootes FTA BM 这 些 样本 点 分 别 具 有 概率 Pi > zs 和 qi 1923". 乘积 空间 CU, 8) 


1. 这 就 是 说 ， 如 果 (xi ,x2，,…) 是 此 集合 中 的 一 个 点 ， 那 么 此 集合 由 一 切 满 足 条 件 ey =X xX 2= 2? 
的 点 (x za，…) 所 构成 . 
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解释 为 : 分 别 具 有 样本 空间 U 各 的 两 个 相继 的 实验 的 样本 空间 ， 称 这 两 个 实验 是 
独立 的 ， 蕴 涵 了 “第 一 次 结果 是 a;” 和 “第 二 次 结果 是 B.” 这 两 个 事件 是 随机 独立 
的 ， 为 此 ， 只 有 当 (U0, 水 ) 的 概率 按 下 述 的 乘法 规则 定义 才 行 : 

P{ (a;,B.)} = pq. (4.1) 
由 于 这 些 概 率 加 起 来 等 于 1， 故 这 种 赋 概 法 是 合法 的 . 事实 上 ， 对 全 部 点 求 和 ， 得 一 
AZERE D pa, MERAM Lp Fug, 之 积 . 

我 们 约定 :“ 两 个 独立 实验 ”总 是 参考 着 一 个 由 两 个 样本 空间 产生 的 组 合 乘 积 空 
闻 ， 而 且 其 概率 由 (4.1) 的 乘法 规则 所 定义 ， 此 约定 ， 可 推广 到 “7 个 相 继 的 独立 
实验 ”这 一 概念 . 

我 们 说 重复 的 独立 试验 ， 意 即 其 因子 样本 空间 (包括 其 中 的 概率 ) 都 是 恒 等 的 ， 

举例 说 ， 这 种 约定 能 使 我 们 把 “独立 地 扔 n 次 硬币 ” 简 述 为 : 具有 2 个 点 的 样 
本 空间 且 其 中 每 一 点 的 概率 均 为 2“. 

请 注意 独立 实验 的 下 述 明 显 的 直观 性 质 : CAA UPR a ,a,，… 构 成 之 事 
件 ， 类 似 地 BB 是 必 中 由 By, ;B.，… 构 成 的 事件 ， 则 (A,B) 是 由 U, B) 中 一 切 下 述 
AXI RO 所 构成 的 事件 ， 且 显然 还 有 

PU(A,B}=DD pg, =(Up, (Ug, ) 5 PiA}PI(B). (4, 2) 
因此 ， 乘 法 规则 可 以 推广 到 两 个 因子 空间 的 任意 事件 中 去 ， 此 推理 亦 可 应 用 到 ”个 
独立 实验 中 去 ， 并 可 证 明 ; 对 nn 个 事件 Al,…,A, WS, BA 仅仅 依赖 于 第 & 个 实 
验 ， 则 A.A, 相互 独立 . 

独立 实验 理论 是 概率 论 中 分 析 上 最 简单 又 最 现代 的 一 部 分 ， 因此， 如 果 可 能 的 话 ， 一 个 
复杂 的 实验 解释 为 一 串 较 简 单 的 独立 实验 的 结果 . 下 面 的 例子 说 明 什么 地 方 这 种 办 法 是 可 
行 的 . 

Gl 〈c) 排 列 ， 我 们 曾 考虑 由 wa ,az ,an Mn! 个 不 同 排列 所 组 成 的 样本 空间 ， 每 个 样 
本 点 赋 以 概率 1/n!， 这 样本 空间 也 可 由 相继 的 (n 一 1) 次 试验 来 表达 ， 现 叙述 如 下 : 先 把 a 
写 出 ， 第 一 次 试验 是 将 as 放 在 a 的 前 面 或 后 面 ， 放 完 az 后 ， 则 有 三 个 位 置 可 以 放置 a2. 于 
是 ， 第 二 次 试验 是 将 a 放 到 三 个 位 置 中 的 任 一 个 位 置 ， 这 就 决定 了 al ,az ,as 的 一 个 排列 ， 有 
四 个 位 置 可 以 放置 a;， 一 般 地 ， 当 al ,az，…,ax 按照 某 一 次 序 排 定之 后 ， 我 们 就 进行 第 有 次 试 
验 ， 即 把 a BE k 1 个 位 置 中 的 任意 一 个 换言之， 在 相继 的 aD 次 试验 中 ， 第 上 次 


坛 验 共有 上 十 1 个 可 能 结果 〔 即 样本 点 )， 且 每 个 可 能 结果 有 概率 zk 十]; ， 由 于 试验 是 独立 


的 ， 于 是 ， 按 照 原始 的 定义 ， 个 元 素 的 任 一 组 排列 的 概率 为 元 。 志 “… 广 : 


n 
(d) 无 放 回 的 抽样 ， 设 总 体 是 a1 ,4a:,…,a)， 在 无 放 回 的 抽样 中 ， 每 次 抽取 都 拿 掉 一 个 
元 素 、 因 此 ， 在 第 & 次 抽取 以 后 ， 余 下 的 只 有 n 一 个 元 素 ， 而 下 一 次 抽取 可 以 由 该 元 素 所 先 
择 的 第 v 号 (v=1,2,…,v 一 k) 位 置 来 描述 ， 如 此 ， 无 放 回 地 抽取 一 个 大 小 为 = 的 样本 变 成 相 


1. 概率 论 学 科 外 ， 按 上 述 方法 定义 的 测度 称 为 习 积 测度 . 
2. 原 书 错 写 为 1/k&， 一 一 译 者 注 
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继 的 r 次 试验 ， 其 中 ,第 一 次 试验 有 n 个 可 能 结果 ， 第 二 次 有 "一 1 个 ,第 三 次 有 n 一 2 个 ，… 
等 等 。 在 每 次 试验 中 ， 所 有 可 能 的 结果 都 赋 以 相同 的 概率 ， 假 定 7 次 试验 独立 ， 这 就 相当 于 按 
照 随机 样本 的 定义 ， 每 个 大 小 为 7 的 样本 都 赋 以 概率 1/(n),。，[ 注 意 ， 当 n==100,r 二 3 时 ， 样 
本 (a13 s 440 sd81) 表示 选取 的 号 人 码 分 别 为 13, 39,79, 我 们 应 该 说 ， 第 三 次 试验 是 从 剩 下 的 
(2 一 2) 个 元 素 所 构成 的 总 体 中 抽取 第 79 号 元 素 ， 而 对 于 原来 的 号 数 而 言 ， 第 三 次 的 试验 结果 
是 与 第 一 次 、 第 二 次 的 结果 有 关 的 . ] 我 们 可 以 看 到 ， 重 复 独 立 试验 的 概念 使 得 我 们 能 把 抽样 
问题 的 研究 看 成 是 相继 的 个 别 运 算 . > 
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mm f2/R (G. Mendel, 1822~1884) 创始 的 遗传 学 理论 对 简单 的 概率 模型 的 
适用 性 提供 了 一 个 富有 教 益 的 例证 . 下 面 我 们 只 局 限于 讨论 一 些 最 初等 的 问题 . 
在 描述 生物 学 的 背景 的 时 候 ， 我 们 必须 使 之 简单 化 并 集中 于 那些 便于 数学 处 理 的 
事实 . 

遗传 性 状 依赖 的 特定 携带 者 ， 称 为 遗传 因子 :， 除了 生殖 细胞 或 者 配子 以 外 ， 人 
体 中 的 每 一 个 细胞 都 具有 同样 的 遗传 因子 结构 .明显 的 事实 是 : 遗传 因子 成 对 出 现 . 
读者 可 以 把 它们 设想 为 一 大 堆 穿 在 一 段 短线 上 的 珍珠 一 一 染色 体 . 这 些 染 色 体 也 成 
对 出 现 ， 而 配 成 对 的 遗传 因子 在 配 成 对 的 染色 体 上 处 在 相同 地 位 ， 最 简单 的 情形 是 
每 一 对 特定 的 遗传 因子 中 的 每 一 个 都 只 能 取 两 种 形式 A 和 a， 因 此， 可 以 构成 三 种 不 
同 的 对 子 ， 而 且 对 于 这 些 特定 的 对 子 来 说 ， 有 机 体 属 于 这 三 种 遗传 型 AA, Aa, aa 
(aA 与 Aa 不 加 以 区 别 )， 例 如 ， 静 豆 携 带 这 样 一 对 遗传 因子 : A 使 之 开 红 花 ，a 使 之 
开 和 白花， 在 这 种 情况 下 ， 三 种 遗传 型 可 以 区 分 为 红 花 、 粉 红色 的 花 和 日 伦 . 每 一 对 
遗传 因子 决定 一 个 可 遗传 的 因素 ， 但 是 机 体 的 可 观察 到 的 大 多 数 性 质 依 赖 于 很 多 因 
素 . 对 于 某 些 特征 〈 例 如 眼睛 的 颜色 、 习 惯用 左手 ) 来 说 ， 某 一 对 特定 的 遗传 因子 
的 影响 特别 大 ， 在 这 些 情况 下 ， 孟 德尔 定律 的 效果 是 容易 观察 到 的 .其 他 一 些 特征 
例如 长 度 ， 可 以 设想 为 一 大 堆 遗 传 因子 的 效果 的 迭 加 [参见 第 10.5 PACo] 这 里 
我 们 将 要 研究 一 对 特定 的 遗传 因子 的 遗传 型 与 继承 的 问题 ， 对 于 这 特定 的 一 对 遗传 
因子 来 说 ， 它 有 三 种 遗传 型 AA, Aa, aa， 一 般 来 说 两 个 遗传 因子 有 N 种 不 同 的 形式 
A,,…,Av， 因 此 就 有 N(N 十 1)/2 个 遗传 类 AlAl,AA,,…,AvAv， 在 这 种 一 般 的 情 
况 下 ， 理 论 需要 作 一 些 修 正 (参看 5. 8 节 习 题 27).、 下面 的 计算 也 可 以 应 用 到 当 人 AA 具 
有 显 性 而 a 是 隐 性 的 情形 中 去 ， 这 就 是 说 ，Aa 这 个 个 体 与 AA 具有 同样 的 可 观察 到 
的 性 质 ， 因 此 ， 对 a 因子 来 说 ， 只 有 纯 aa 型 才 会 表现 出 不 同 的 可 观察 到 的 影响 . 不 
完全 显 性 的 全 部 演变 在 自然 界 中 会 出 现 ， 典型 的 不 完全 隐 性 的 性 状 是 蓝 眼 睛 和 习惯 
用 左手 等 等 . 


x 有 星 号 的 小 节 为 处 理 特殊 的 主题 ， 可 以 略 去 ， 以 下 相同 ， 
1. 原文 为 gene， 遗 传 学 中 一 般 都 称 基 因 . 一 -一 编者 注 . 
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生殖 细胞 或 者 配子 是 由 分 裂 过 程 所 产生 的 而 且 它 只 具有 一 个 遗传 因子 ， 纯 AA 
型 和 aa 型 的 机 体 (或 纯 合 子 ) 只 产生 一 种 类 型 的 配子 ,但 是 Aa 型 的 机 体 〈 杂 合子 ) 
产生 同等 数目 的 A 配子 与 a 配子， 新 的 机 体 由 两 类 上 一 代 的 配子 而 人 得 来 ， 而 且 新 的 
机 体 从 双亲 的 配子 得 到 它 的 遗传 因子 . 因此 每 一 对 都 包含 一 个 父系 的 遗传 因子 和 一 
个 母系 的 遗传 因子 ， 而 且 每 一 个 遗传 因子 可 以 追溯 到 任何 一 代 特 定 的 祖先 ， 不 管 是 
哪 一 代 的 远 祖 . 

后 代 的 遗传 型 依赖 于 一 个 随机 过 程 ， 在 每 - -时刻 ， 每 一 个 上 一 代 的 遗传 因 了 以 
1/2 的 概率 传 给 后 代 ， 而 相继 的 试验 是 相互 独立 的 . 换 句 话说 ， 我 们 可 以 把 第 n 代 的 
遗传 型 设想 为 n 次 独立 试验 的 结果 ， 每 一 次 试验 对 应 于 扔 一 个 硬币， 例如，AaX Aa 


的 后 代 的 遗传 型 配 成 对 时 为 AA, Aa,aa， 其 对 应 的 概率 为 ,地 , 了 ， 一 个 AAXaa 的 


结合 只 能 产生 Aa 型 的 后 代 ， 等 等 . 

把 总 体 视 为 全 体 ， 我 们 可 以 把 亲本 的 配对 设想 为 第 二 个 随机 过 程 的 结果 . 我 们 
将 仅仅 研究 所 谓 的 随机 交配 ， 它 是 用 下 述 条 件 所 定义 的 ， 如果 在 第 一 代 子 孙 中 随 机 
选取 r 个 ， 则 它们 的 亲本 是 所 有 可 能 亲本 构成 的 总 体 中 的 一 个 大 小 为 7 的 随机 样本 . 
换 旬 话说 ， 每 一 个 后 代 可 以 视 为 随机 选取 的 一 对 亲本 的 产物 ， 而 且 所 有 这 些 选取 者 
是 相互 独立 的 ， 随 机 交配 是 流行 于 许多 自然 界 的 总 体 及 田间 试验 的 一 些 条 件 的 理想 
模型 ， 然而， 如 果 红 豌豆 播种 在 田地 中 的 某 一 个 角落 而 白 更 豆 播种 在 另外 一 个 角落 . 
则 同一 种 颜色 的 亲本 的 交配 比 随 机 交配 要 来 得 经 常 些 ， 优 先 选择 性 〈 如 像 淡 颜 色 优 
先 选 择 淡 颜色 ) 也 与 随机 交配 这 一 条 件 相 违背 .完全 非 随 机 交配 可 以 用 自 花 受精 植 
物 和 人 工 授粉 来 代表 ， 某 些 这 样 的 交配 系统 将 要 数学 地 加 以 分 析 ， 但 是 我 们 大 部 分 
是 注意 随机 交配 . 

后 代 的 遗传 型 是 四 个 独立 的 随机 选择 的 结果 . 两 个 亲本 的 遗传 型 的 选择 可 以 有 
3。3 种 方式 ,它们 的 遗传 因子 的 选择 有 2*，2 种 方式 ， 然 而 ， 我 们 可 以 把 这 两 个 选择 
结合 起 来 ， 并 且 把 这 个 过 程 描述 为 这 样 一 个 双重 的 选择 : 父系 的 遗传 因子 和 母系 的 
遗传 因子 的 选取 是 相互 独立 地 、 随 机 地 从 一 个 总 体 里 抽取 的 ， 这 个 总 体 是 由 父 华 的 
总 体 中 的 全 部 父系 所 携带 的 遗传 因子 和 母系 所 携带 的 遗传 因子 的 全 体 所 构成 . 

假定 三 种 遗传 型 AA, Aa,aa 在 父系 和 母系 中 以 同样 的 比例 w : 2v :ww 而 发 生 . 我 
们 将 假设 4 十 2v 十 w= 二 1， 而 且 称 u,2v,w 为 遗传 型 的 频率 ， 令 

= uF V, q = v+ w. (5.1) 
显然 ， 遗 传 因子 A 的 个 数 与 a 的 个 数 之 比 为 p : q,p 十 9 二 1， 我 们 称 p,q 分 别 为 遗传 
因子 A 和 a 的 频率 ， 由 于 在 每 次 选取 中 ， 遗 传 因子 A 被 选 出 的 概率 为 p， 又 因为 假 
定 了 选取 是 相互 独立 的 ， 所 以 某 后 代 是 AA 的 概率 为 p. RR Aa 可 以 用 两 种 方式 
发 生 ， 所 以 它 的 概率 为 2pqg， 因 此 ， 在 随机 交配 的 条 件 下 ， 一 个 后 代 属 于 AA, Aa & 
aa 的 概率 分 别 为 

u = f, 2u=2p, w=”. (5.2) 


“5.5 在 遗传 学 中 的 应 用 103 


例 a) 所 有 的 亲本 都 是 Aa (异性 结合 子 )， 则 w= w=0,20-1, p=g=s. (b) 


AA 和 aa 型 的 双亲 具有 同样 的 比 数 ， 则 u—w=+,0=0, 而 且 p=. (0 最 后 ， 
uw, v= H p=q= 5. ERS AEP. ILRI MH wm =p 2a 一 去 ， 
w= > 

为 了 更 好 地 了 解 (5. 2) 的 意义 ， 让 我 们 固定 遗传 因子 的 频率 p 和 gq(p 十 gq 二 1) 来 
考虑 全 部 遗传 型 的 频率 x,2vzw 的 系统 ， 其 中 utv=prvtw=g HERTE 
说 ， 一 切 都 导出 与 6.2) 相同 的 概率 .在 它们 之 中 ， 有 下 述 的 特殊 分 布 : 

u= p, 20v=2p9, w=. (5.3) 
考虑 如 例 (c) 的 一 个 总 体 ， 其 中 三 种 遗传 型 wu 也 由 (5.3) 式 所 给 出 . 由 (5.2)， 
EA: 第 一 代 子 孙 的 遗传 型 的 概率 并 无 改变 . 因此 ， 我 们 称 形 如 〈5.3) 的 遗传 型 的 
分 布 是 平稳 的 或 平衡 的 ， 对 每 一 个 比例 p:q 来 说 ， 都 对 应 这 样 一 个 分 布 . 

当 总 体 很 大 时 ， 实 际 观察 到 的 第 二 代 的 三 种 遗传 型 的 频率 与 〈5. 2) 武 所 给 出 的 
理论 概率 很 近似 值得 高 度 注意 的 是 : 无 论 其 父辈 的 分 布 &:2u: 记 如 何 ， 此 分 布 是 平 
稳 的 ， 换 句 话 说， 如 果 观 察 到 的 频率 恰巧 与 计算 得 到 的 概率 一 致 ， 则 下 一 代 将 具有 
平稳 的 遗传 型 分 布 ， 而 且 其 后 代 永 远 具 有 这 一 分 布 ， 实际 上 ， 偏 差 会 观察 得 到 ， 但 
是 在 大 总 体 中 我 们 可 以 说 : 无 论 父 非 这 个 总 体 中 的 结构 如 何 ， 随 机 交配 所 产生 的 下 一 
代 将 渐 近 地 具有 不 变 的 遗传 因子 频率 的 平稳 遗传 型 分 布 ， 从 第 二 代 起 ， 没 有 系统 的 
恋 化 的 倾向 ， 第 一 代 子 孙 就 达到 稳定 的 状态 . 这 首先 被 哈代 (G. H. Hardy) 所 注意 
到 ， 因 此 他 解决 了 在 和 孟 德 尔 定律 中 假定 的 难点 .特别 地 ， 由 此 推出 ， 在 随机 交配 的 
条 件 下 ， 三 种 遗传 型 的 频率 具有 比例 pr :2pq:q， 这 反 过 来 又 可 以 用 来 检验 随机 交配 
这 一 假设 . 

哈代 还 指出 ， 必 须 对 “ 渐 近 ”一 词 加 以 注意 ， 甚 至 对 平稳 分 布 来 说 ， 我 们 都 可 
以 期 望 从 一 代 到 下 一 代 会 发 生 小 的 变化 . 这 就 使 得 我 们 作 如 下 的 设想 ， 从 任何 一 个 父 
辈 的 总 体 开 始 ， 用 随机 交配 就 建立 了 下 一 代 中 的 平稳 分 布 (5. 3)， 对 于 一 个 平稳 分 
布 来 说 ， 都 没有 任何 种 类 的 系统 改变 的 倾向 ， 然 而 ， 随 机 起 伏 会 一 代 一 代 地 改变 跟 
传 因 子 的 频率 p 和 gqg， 因 此 遗传 结构 会 慢 慢 地 改动 ， 不 存在 一 种 力量 来 专门 去 恢复 原 
始 的 频率 ， 相 反 ， 我 们 的 简化 模型 导出 下 述 结论 (参见 15.2 节 例 GD): 对 一 个 有 限 
总 体 来 说 ， 一 个 遗传 因子 最 终 将 要 死 掉 ， 因 此 ， 这 个 总 体 最 后 将 属于 AA 或 aa 中 的 


1. 否则 ， 我 们 的 概率 模型 就 没有 任何 实际 意义 了 ， 大 数 定律 与 中 心 极限 定理 给 了 这 个 事实 以 精确 的 描 
述 ， 它 使 我 们 能 够 估计 随机 起 伏 的 影响 . 

2. 参阅 [31]， 如 果 先 引用 一 下 第 9 章 和 第 15 章 的 术语 ， 我 们 可 以 把 这 一 情况 描述 如 下 ， 第 n 代 的 三 
个 遗传 型 的 频率 是 三 个 随机 变量 ， 其 期 望 值 由 〈5. 2， 所 给 出 ， 它 不 依赖 于 wn， 它们 的 真实 值 从 一 
代 到 下 一 代 将 要 发 生变 化 ， 它 构成 一 个 马尔 可 夫 过 程 . 
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某 一 个 类 型 实际 上 这 并 不 一 定 会 发 生 ， 因 为 变异 、 选 择 和 其 他 许多 影响 会 产生 新 的 
遗传 因子 

哈代 的 定理 经 常 被 解释 为 永远 可 以 达到 严格 的 稳定 性 .通常 犯 的 错误 是 相信 大 
数 定律 的 作用 像 是 赋 于 寻求 重 返 原始 状态 的 记性 的 一 种 力量 ,而 很 多 错误 的 结论 也 
是 由 此 假设 而 导出 的 . 注意 : 哈代 的 定律 不 能 应 用 到 具有 两 对 遗传 因子 (例如 眼睛 
的 颜色 和 习惯 用 左手 ) 9 个 遗传 型 AABB,AABb,… ,aabb 的 分 布 中 去 ， 这 仍然 有 平稳 
分 布 的 倾向 ， 但 是 在 第 一 代 中 均 势 不 能 达到 《参见 5.8 市 习题 31)， 


“5.6 伴 性 性 状 


在 前 一 节 的 导言 中 曾 说 及 遗传 因子 在 染色 体 上 ， 它们 都 是 成 对 地 出 现 ， 而 传递 
却 是 单个 地 ， 因 此 ， 在 染色 体 上 的 全 部 遗传 因子 成 柱状 结合 '. 所以， 我 们 的 遗传 因 
子 的 遗传 方案 仍然 可 以 应 用 到 作为 单位 的 染色 体 上 去 . 性 别 决 定 于 两 个 染色 体 ， 阴 
性 是 XX， 阳 性 是 XY， 和 母亲 一 定 传 给 一 个 文 染 色 体 ， 而 后 代 的 性 别 决定 于 父亲 传 给 
他 〈 她 ) 的 那 一 个 染色 体 ， 因 此 产生 同等 数目 的 阳性 和 阴性 配子 .男孩 和 女孩 出 生 
率 之 差 可 以 用 先天 的 遗传 物 的 偶然 偏差 来 解释 .，. 

我 们 曾经 说 过 : 遗传 因子 和 染色 体 都 是 成 对 出 现 的 . 但 是 ， 也 有 例外 的 情形 ， 
那 就 是 当 遗 传 因 子 处 于 久 染色体 上 而 Y 染色体 上 没有 对 应 的 遗传 因子 的 时 候 . 阴性 
有 两 个 义 染 色 体 ， 因 此 有 两 对 这 样 的 六 型 的 联结 的 遗传 因子 ， 然 而 在 阳性 中 ，X 途 
传 因子 单个 出 现 ， 两 个 伴 性 的 遗传 因子 会 引起 色盲 和 出 血 素 质 ， 对 于 它们 之 中 每 一 
个 来 说 ， 阴 性 还 可 以 分 成 三 个 遗传 型 AA,Aa,aa,， 但 是 却 只 有 一 个 遗传 因子 ， 而 阳性 
只 有 两 个 遗传 型 A 和 a BR: 儿子 经 常 是 具有 父亲 的 了 染色体， 因此 ， 伴 性 性 状 
不 可 能 由 父亲 传 给 儿子 .然而 它 可 以 通过 父亲 传 给 女儿 ， 再 由 女儿 传 给 孙子， 

现在 我 们 把 前 一 节 的 分 析 进 行 推广 ， 仍然 假定 随机 交配 ， 并 且 假 定 在 阴性 总 体 
hEN AA, Aa, aa 的 频率 分 别 为 u,2v,w， 如 前 面 一 样 ， 我们 令 pHutv.g=vrw. 
阳性 的 两 个 遗传 型 A 与 a 的 频率 分 别 以 p 和 g RR Cp tq 二 1)， FE pM p 分 别 
为 遗传 因子 A 在 阴性 总 体 与 阳性 总 体 中 的 频率 .一 个 阴性 后 代 的 遗传 型 为 AA, Aa, 
aa 的 概率 分 别 LL u s ZU s wW RL, 阳性 的 型 A 和 型 a 的 类 似 的 概率 以 pi 和 9 1 RZ. 
因为 一 个 阳性 后 代 从 其 母亲 那里 得 到 X 染色 体 ， 所 以 


Pi =p, =q. (6.1) 
对 三 个 阴性 的 遗传 型 来 说 ， 如 第 5 节 一 样 . 我 们 发 现 
u 一 pp’ 2v, 一 pq + gp’ sw 一 qq . (6. 2) 


因此 


* 此 节 处 理 特殊 主题 ， 可 上 略 去 
L 这 情形 由 于 染色 体 的 偶然 破裂 和 重新 结合 而 稍 复杂 些 (参见 2. 10 节 习 题 12). 
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pu tu = stp, 


q = u tw = sat), (6. 3) 


这 意味 着 ; 在 阳性 的 后 代 中 ， 属 于 母系 的 遗传 因子 A 和 a 分 别 近似 地 以 频率 p 和 
9 而 出 现 ; 而 在 阴性 的 后 代 中 ， 遗 传 因子 的 频率 近似 地 为 p 和 9 ， 或 者 说 是 父系 与 
母系 中 的 这 些 遗 传 因子 的 频率 一 半 ， 我 们 发 现 遗 传 因子 的 频率 有 趋 于 相等 的 趋势 . 
HKE, MA (6.1) Al (6.3) 我 们 得 到 


pi — py = 3p— Pad — q = zag). (6.4) 
因此 ， 随 机 交配 使 下 一 代 的 阴性 与 阳性 的 遗传 因子 的 频率 之 差 近 似 地 将 要 减少 一 半 . 
然而 ， 它 不 能 使 这 个 差 变 为 0， 使 之 更 加 减少 的 趋势 是 存在 的 . 与 哈代 的 定律 比较 ， 
在 一 代 以 后 这 里 没有 平稳 的 情形 ， 我们 可 以 追究 由 一 代 到 一 代 的 变化 的 系统 部 分 而 
”忽略 随机 起 伏 ， 并 验证 理论 概率 (6.2) A (6.3) 与 第 一 代 子 孙 的 对 应 的 实际 频率 
一 致 :， 对 第 二 代 来 说 ， 用 类 似 的 推导 我 们 可 以 得 到 


l / / / / 
p = tat p= Sed Ps p =a +d = sats". (6.0) 
当然 ， p's = pi ,9 一 个. 第 n 代 阴 性 子孙 中 概率 Pn 和 9， 的 一 般 表 达 通 过 几 步 推导 就 
可 以 得 到 > 
一 于 (2j 十 加 )， B= qq’). (6. 6) 
(注意 a 十 8 二 1. ) 于 是 
_ Pert Port _ pop 
Py 9 at ¢ 1) 38 D” 3 


/ ， (6.7) 
dn = bitie =p+(—b"t 4, 
而 ,二 Pp.-1，4 ,一 qs-1， 因此 
Pa > as Pan ad- 有， gna >B. (6.8) 
正如 (6. 2) 所 给 出 的 一 样 ， 在 阴性 总 体 中 遗传 型 的 频率 为 
Un = purip rr 20, = Pra GritGaP ris Wh = ag wt (6.9) 
因此 
u, > a’, 2u, > aß, w, > Bp’. (6. 10) 


这 些 公式 说 明 ， 当 一 代 一 代 传 下 去 的 时 候 ， 有 一 个 很 强 的 系统 趋势 ， 使 之 最 后 
趋 于 这 样 一 个 情况 : 遗传 型 A 和 a 在 阳性 中 出 现 的 频率 分 别 为 a 和 6， 而 阴性 的 遗传 


L 如 果 用 第 5 节 脚 注 中 所 引进 的 术语 ， 我 们 可 以 把 pa 与 gw 解释 为 第 ”次 阴性 子孙 中 遗传 因子 的 期 户 
值 ， 如 果 这 样 解释 的 话 ， 关 于 pr a, 的 公式 就 不 再 是 渐 近 式 而 是 精确 的 等 式 了 . 
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型 AA, Aa aa 分别 具 有 概率 a ,2a8,8 ， 由 (6.7) 看 出 ， 其 收 钙 的 速度 是 很 快 的 ， 实 
际 上 ， 三 、 四 代 以 后 就 会 达到 均 势 ， 确 实 ， 上 述 的 变化 的 随机 起 伏 是 很 小 的 ， 然 而 
后 者 说 明了 主导 的 系统 趋势 . 

我 们 的 主要 结论 是 在 随机 交配 下 ， 我 们 可 以 期 望 在 阳性 中 的 伴 性 的 遗传 型 A 
Ala; 在 阴性 中 的 遗传 型 AA, Aa, aa 分 别 渐 近 地 以 频率 a,P,a ,2a8,8 发生， 其 中 
at p=1. 

应 用 .许多 伴 性 遗传 因子 〈 如 色盲 ) 都 是 隐 性 的 并 且 会 引起 缺陷 ， 令 a 就 是 这 样 
的 一 个 遗传 因子 .于 是 所 有 的 阳性 的 a 和 所 有 的 阴性 的 aa 都 会 显示 出 缺陷 ，Aa 型 的 
阴性 生物 可 以 把 缺陷 传 给 她 们 的 后 代 ， 但 却 不 影响 她 们 自己 ， 因 此 ， 我 们 可 以 期 望 ， 
隐 性 的 伴 性 缺陷 发 生 在 阳性 生物 中 的 频率 为 w， 而 发 生 在 阴性 生物 中 的 频率 为 w ， 如 
果 100 个 男人 中 有 一 个 色 育 的 话 ， 那 么 在 10 000 个 女人 中 才 会 有 一 个 色 鹉 . 


“5.7 1a fF 


作为 选择 的 影响 的 一 个 典型 例子 ， 我 们 将 要 研究 个 体 aa RAT HERA WI. 当 
遗传 因子 a 是 隐 性 的 和 致死 的 时 候 就 会 出 现 这 种 情形 ， 因 此 ， 个 体 aa 出 生 了 但 是 不 
能 生存 ， 若 用 人 工 培育 去 干涉 或 阻止 个 体 aa 之 交配 时 就 会 出 现 男 外 一 种 情形 . 

假定 在 个 体 AA 与 Aa 之 间 进 行 随机 交配 ， 但 是 不 与 aa 型 进行 交配 . 令 总 体 中 
AA, Aa, aa 型 的 遗传 型 出 现 的 频率 分 别 为 u,2v,w， 于 是 其 亲本 对 应 的 频率 为 


一 一 2m” 一 2v w =Q. (7.1) 


o l-w’ lw’ 
我 们 可 以 仿照 第 5 节 一 样 去 进行 推导 ， 不 过 必须 以 〈7.1) PEP BTA u, 
LU, W, 因此 ， (5. 1) 被 


Uv VU 


所 代替 . 第 一 代 子孙 中 那 三 个 遗传 型 的 概率 仍然 由 〈5.2) 或 者 说 w= 二 Pp ,2v = 209, 
w= g 所 给 出 . 

与 前 面 一 样 ， 为 了 研究 从 一 代 到 一 代 的 系统 变化 ， 我 们 用 musu IIR u, 
v,wWw， 从 而 得 到 第 二 代 的 对 应 的 概率 如 ,wz ， 等 等 .一般 地 ， 由 《7. 2) 我 们 得 到 


Un FY, _ _ 
Pa Z 7 wy,’ 0 ] — w, (7.3) 
和 
Une = 加 2 = pndn Wn = Ins (7. 4) 


比较 (7.3) A (7.4) 得 到 


x HP Ab PK EB, BY RBZ. 


tl 一 ~ 中 
Givi ] 一 l+q, (7. 6) 
KK (7.6) 我 们 可 以 精确 地 算出 qg 来， 事实 上 
Gat dn 
由 此 相继 地 得 到 
l 一 1 十 二 ， 二 一 2 十 二 ， 工 二 3 十 二 ,. 9 lnt (7.8) 
qı q Gd 93 q qn q 
或 者 
2 
— — 4 — {4 
Gn ] 十 zzg” Wt] (= 十 z) . (7. 9) 


我 们 发 现 不 繁殖 的 遗传 型 逐渐 被 淘汰 ， 但 是 这 个 过 程 是 很 慢 的 ， 对 g 二 0. 1 来 说 ， 到 


第 10 代 才 使 遗传 因子 a 的 频率 减 小 一 半 ， 使 aa 型 的 频率 近似 地 减 为 二 ，( 如 果 a 是 


伴 性 的 ， 则 如 同 5. 8 节 习 题 29 所 证 明 的 ， 其 被 消除 的 速度 是 很 快 的 ， 而 对 一 般 的 选 
择 方案 来 说 ， 请 参见 5. 8 市 习题 30. ) 


5.8 J rel 


1 BSS. 若 已 知 疫 有 两 面相 同 ， 求 至 少 有 一 个 么 点 的 概率 . 

掷 10 个 蜗 子 .已 知 其 中 至 少 有 一 个 么 点 出 现 ， 求 有 两 个 以 上 的 么 点 出 现 的 概率 p. 

桥牌 ， 在 桥牌 游戏 中 ， 西 家 没有 爱 司 . 问 他 的 合作 者 ERR) @ 没有 爱 司 ，(b) 有 两 个 
或 两 个 以 上 的 爱 司 的 概率 是 多 少 ? 用 直接 的 推理 验证 所 得 的 结果 . 

桥牌 .。 设 南 、 北 两 家 共有 10 张 将 牌 〈 将 牌 是 一 种 指定 花色 的 牌 ).(〈a) 试 求 另 外 3 张 将 牌 
集中 在 同一 家 (东家 或 西 家 ) 的 概率 b) 若 已 知 其 余 3 张 将 牌 中 有 一 张 老 开 ， 试 求 他 
是 “无 保护 ”( 意 即 他 只 有 一 张 老 开 ， 而 其 余 两 张 将 牌 在 他 的 合作 者 手中 ) 的 概率 . 

用 5.2 节 例 Cb) 中 的 条 件 概率 的 概念 讨论 2. 7 TH Cb) 中 的 钥匙 问题 . 

厂 里 有 三 台 机 器 A,B,C 生产 螺丝 钉 ， 它 们 的 产量 分 别 占 总 产量 的 25% ,35%,40%, IP 
品 的 次 品 率 分 别 为 5 外 ,4% ,2 中 ， 今 从 产品 中 任意 取出 一 颗 螺 丝 钉 ， 而 发 现 它 是 次 品 ， 求 
这 颗 螺 丝 钉 是 由 机 器 A 或 B 或 C 造 出 的 概率 ， 

设 100 个 男人 中 有 5 个 色盲 者 ， 而 10 000 个 女人 中 有 25 个 色盲 者 . 今 从 人 群 中 任 选 一 
人 ， 并 发 现 他 是 色盲 ， 求 此 人 是 男性 的 概率 (假设 人 群 中 男女 的 人 数 是 相同 的 ). 


1. 对 于 各 种 遗传 因子 的 影响 的 分 析 ， 请 参见 L32. 
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14. 


15. 


16. 
17. 


18. 


19. 


20. 


21. 


7 个 球 随机 地 放 入 7 个 盒 ， 各 种 排列 的 概率 在 第 2. 5 ae 2- 1 PAR. MAER K 
证 : 给 定 两 个 盒 是 空 的 条 件 下 ， 有 一 个 盒 放 了 3 个 球 的 概率 为 1/4， 精 确 到 5 位 小 数 . 证 
明 1/4 就 是 正确 的 答案 . 

H-MRS. -HEIMAR Wik. 假定 第 一 次 没 撕 出 么 点 ， 问 需要 据 的 次 数 多 于 3 才 停 
止 的 概率 为 何 ? 


: 〈 续 上 题 )， 假 定 所 掷 之 次 数 ”为 偶数 ， 问 ?一 2 的 概率 是 多 少 ? 
. 设 一 个 家 庭 恰 有 个 小 孩 的 概率 pa Hap’ snl, po=l-apAtptp te), Hien ty) 


孩 的 所 有 可 能 的 性 别 分 布 是 等 概 的 ， 证 明 当 上 有 宇 1 时 ， 一 个 家 庭 恰 有 上 个 男孩 的 概率 是 
2ap* /(2— pt, 


. EE). 已 知 家 庭 中 至 少 有 一 个 男孩 ， 求 此 家 庭 至 少 有 两 个 男孩 的 概率 . 
. RT ABAUMAMHA. RF B 具 有 两 面 红 四 面 白 . 扔 一 个 硬币 ， 如 果 出 现 正面 ， 则 


wees pease A; 如 果 出 现 反面 ， 则 掷 骨 子 B (a) 证 明 在 任何 一 次 抛 据 中 ， 出 现 红 的 概率 
E 1/2. (b) 如 果 前 两 次 结果 是 红 的 ， 问 第 三 次 掷 出 红 的 概率 是 多 少 ? 〈c) MRA n 次 
Hi PRET AS, [ARERR A 的 概率 是 多 少 ? Cd) 钢 子 模型 是 否 和 这 个 游戏 等 价 ? 

在 5.2 节 例 (a) 中 ， 令 mm 为 整个 比赛 的 获胜 者 在 第 ”次 试验 获胜 的 条 件 概率 ， 假 定 比 赛 
并 没有 在 n 轮 结 束 : yn Az, 分 别 为 输家 和 等 待 者 在 第 ”次 试验 获胜 的 概率 . (a) 证 明 


ty = +o Ye = eet my = amt. (x) 


(b) 用 直接 的 简单 推理 证 明 ， 实 质 上 2, 25 yn = yo Zn =z 不 依赖 于 n.《(c) 证 明 a 胜 这 一 局 


的 概率 为 5/14 (用 1.8 节 习题 5 的 推理 )，(d) 证 明 2 =F. ys, HSE CH) 的 


惟一 的 有 界 解 . 

设 事件 AL. Ao. A, Shar, A P{Ai) 二 p， 试 求 没有 一 个 Ai(& 二 1,2,…,n) 发 生 的 概 
Z p. 

( 续 上 题 )， 证明 p<c >? . 

( 续 上 题 )， 由 喜 弗 雷 尼 不 等 式 (第 4 章 (5.7)) 推出 : BEALL A, 中 有 & 个 以 上 同 
时 发 生 的 概率 小 于 (pi 十 … 十 pn) /R! 

波 利 亚 色 子 模型 ，5.2 节 例 (c)， 若 已 知 第 二 次 所 取出 的 球 是 黑 的 ， 求 第 一 次 所 取出 的 球 
也 是 黑 的 概率 . 

波 利 亚 锥 子 模型 ，5. 2 节 例 (c)， 用 数学 归纳 法 证 明 : 无 论 是 哪 一 次 试验 ， 黑 球 出 现 的 概 
率 总 是 5 /(b 十 7). 

( 续 上 题 )、 用 归纳 法 证 明 ， 对 任何 m 二 n， 第 m 次 与 第 n 次 所 取出 的 球 是 黑 ， 黑 到 黑 ， 红 
的 概率 分 别 为 


b (btc) br 
(b+r) (b+r+c)’ (b+r) (b+rtc)’ 


并 把 此 结果 推广 到 多 于 两 次 取 球 的 情形 . 
疲 利 亚 模 型 的 时 间 对 称 性 . 设 A,B 表 示 红 球 或 是 黑 球 〈 即 A,B 有 四 种 可 能 的 组 合 方 法 : 


1. 根据 A.J. Lotka， 当 p=0. 7358 时 ， 美 国家 庭 的 统计 是 满足 我 们 的 假设 的 .参见 [33]. 


22. 


23. 


24. 


25. 
26. 


27. 


28. 
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ye, A8, Bo, MR) ER: 已 知 第 nn 次 出 现 人 A 后 第 m 次 出 现 B 的 概率 ， 等 于 已 知 
第 nn 次 出 现 B 后 第 mm 次 出 现 A 的 概率 . 
在 波 利 亚 模型 中 , 设 p(n) 是 前 nn 次 取 球 中 出 现 & 个 黑 球 的 概率 ， 证 明 下 面 的 递 推 关系 式 


r+(n—k)c b+ (k—-l)e 
pi (nT) = p(n) b+r-+ne T pr-1 Cn) b—rtne ’ 


其 中 (Co 解释 为 零 ， 应 用 这 关系 式 ， 即 可 得 到 (2.3) 的 一 个 新 证 明 方 法 . 
波 利 亚 分 布 ， 在 (2.4) PS 


(8. 1) 
HEBR’ 

— p/¥\ 1/ 一 9/7 
EAC) 
—l/y 
Co”) 
对 任何 常数 OR EAR p>0,q>0,y >01 都 有 意义 (其 中 ptq=1). Wik 

Pa, Cn) > OF 


Pr, (n) = ; n =m Fn, (8.2) 


Dp, Cn) 一 一 l, 
Al Ar (8. 2) 确定 了 整数 0,1,.*,n 上 的 一 个 概率 分 布 ， 即 波 利 亚 分 布 . 
波 利 亚 分 布 的 极限 形式 ， 如果? 一 ceo, 请 0,7 一 0 使 得 一 0 > o> MES 
定 的 Mi» 有 


(Om m= E) F 
验证 这 一 关系 ?， 并 证 明 对 于 固定 的 和 po 来 说 ， 右 边 项 加 起 来 为 1. 《右边 是 所 谓 负 二 项 
分 布 ， 参 见 6. 8 节 和 6. 10 节 习 题 37. ) 
用 条 件 概率 米 解释 第 2 章 (11.8). 
两 两 独立 但 全 体 不 独立 的 事件 ， 掷 两 颗 仍 子 并 定义 如 下 三 事件 : A 表示 第 一 颗 般 子 掷 出 
奇数 点 ， 刀 表示 第 二 颗 仍 子 掷 出 奇数 点 ， 而 C 表示 两 颗 山 子 的 点 数 之 和 为 奇数 〈 即 一 颗 
掷 出 偶数 ， 另 一 颗 掷 出 奇数 ) 假定 36 个 样本 点 中 每 个 的 概率 都 是 1/36， 则 任何 两 事件 各 


相互 独立 ， 且 每 个 概率 都 是 元， 但 此 三 事件 不 能 同时 发 生 . 


在 生物 学 中 的 应 用 
把 第 5 节 中 的 结果 推广 到 下 述 情 形 去 : 每 一 个 遗传 因子 具有 AL Ale Ae 中 的 任 一 形式 ， 
因此 有 (RE 十 1)72 种 遗传 型 而 不 是 三 种 遗传 型 〈 复 等 位 基因 . ) 
兄妹 交配 从 一 个 总 体 中 随机 地 选取 两 个 亲本 ， 假 设 这 个 总 体 中 遗传 型 AA,Aa,aa 出 现 
的 频率 分 别 为 w,2z,zo， 这 个 过 程 一 直 在 他 们 的 后 代 中 重复 她 进行 . 求 出 第 一 代 第 二 代 第 


l. 原 书 中 把 Pn, (n) 误 写 为 Pn un: 一 一 详 者 注 
2, 原 书 有 错 ， 它 把 pn (m) 误 写成 了 pm.»， 且 天 掉 了 一 个 因子 (” )， 一 一 译 者 注 
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29. 


30. 


31. 


32. 


33. 


34. 


35. 


三 代 子 孙 的 亲本 都 是 属于 AA 的 概率 [参见 15. 2 Wh (j) 及 16.4 节 例 b) ] 
选择 ， 令 a 为 一 个 隐 性 的 伴 性 遗传 因子 ， 假 定 在 一 个 选择 过 程 中 与 阳性 的 a 交配 是 不 可 能 
的 ， 如果 在 阴性 中 遗传 型 AA,Aa,aa 出 现 的 频率 分 别 u 2v w, GUE: 对 第 一 代 阴 性 子孙 


来 说 ，t 二 uw 十 v2 二 0 十 tw,t 二 0， 因 此 =p aaya 这 就 是 说 ， 在 阴性 中 ， 


遗传 因子 a 减少 了 一 半 . 
第 7 节 中 的 选择 问题 可 以 推广 到 这 样 一 种 情况 : 假定 只 有 aa BMRA OO<Ax)) 可 以 
除去 ， 证 明 


_ utv _vt (1A) w 
P~ Iaw 9 l-Aw `’ 


更 一 般 地 ，(7. 3) 被 


iia ’ Gn+1 = Ba. 

所 代替 . (这 些 方 程 的 一 般 解 似乎 是 不 知道 的 . ) 

同时 考虑 两 对 分 别 具 有 可 能 形式 (A,a),(B,b) 的 遗传 因子 .每 一 个 人 传 给 后 人 以 这 两 点 中 
各 一 个 ， 并 假定 这 四 个 可 能 中 的 每 一 种 都 具有 概率 1/4，〈( 当 遗传 因子 在 分 离 的 染色 体 上 
的 时 候 就 是 这 种 情形 ， 否 则 它们 之 间 有 很 强 的 依赖 性 , A 9 种 遗传 型 ， 我 们 假定 它们 在 
父辈 总 体 中 的 频率 分 别 为 UAAba U aane sU Aanb Users s 2U aans s 2U aabb s 2U anne ,2Laapb ,4LUaabb， & 
pas =U aars TU aas FU aa TU Aaen s PAb = U AAbb HU habb 十 Uaab +U aanb » Pas = U aage FHU aaeb 十 
U asus HU aa + Pab =U aab +U aab HU cats FU aan. 计算 第 一 代 子 孙 的 对 应 的 量 . 对 它 来 说 我 们 
HERA : DE = pan — s, DY = pab +0, pis = Paw ts par’ = pa —$ 其 中 26= pas pa — Par Pas. F 
稳 分 布 为 paws 20= pa +26, SS. GER: 哈代 的 定律 不 能 应 用 ， 由 一 代 到 下 一 代 其 结 
构 会 发 生变 化 , ) 

假定 在 某 总 体 中 遗传 型 的 频率 为 u= p’ ,2u=2pqa.w=q. BE-TRA Aa 型 遗传 型 的 人 ， 
他 兄弟 也 其 有 同样 的 遗传 型 的 概率 为 (1 十 pq) /2， 

注意 ! ”下 面 这 些 问 题 都 是 建立 在 家 族 关系 上 的 ， 并 且 也 给 出 了 亲属 关系 等 级 概念 的 一 种 
直观 意义 ， 每 一 个 问题 都 是 前 一 个 问题 的 继续 .仍旧 假定 随机 交配 ， 并 沿用 第 5 节 的 符 
号 ， 我 们 这 里 考虑 的 是 一 类 特殊 的 马 氏 链 (参见 第 1S). 给 阵 代数 可 以 简化 节 瑟 . 

分 别 以 数字 1,2,3 来 代替 遗传 型 AA, Aa aa, FO pa (i,k 二 1,2,3) 为 已 知 其 父亲 《或 母 
亲 ) 的 遗传 型 为 i 的 条 件 下 其 后 代 的 遗传 型 为 的 条 件 概 率 ， 计 算 这 9 个 概率 pa， 假定 
其 他 的 父辈 的 遗传 型 为 1,2,3 的 概率 分 别 为 p pgg. 

证 明 在 已 知 其 一 特定 的 子女 的 遗传 型 为 i 的 条 件 下 ， 父 亲 的 遗传 型 为 的 条 件 概率 也 
是 Pir. 

证 明 在 已 知 其 孙子 (祖父 ) 的 遗传 为 i 的 条 件 下 ， 其 祖父 (孙子 ) 的 遗传 型 为 的 条 件 概 


Prt+1 一 


1. 第 一 版 在 此 处 有 一 错误 ， 那 里 用 “兄弟 ”《( 同 父 同 母 ) 一 词 代替 了 此 处 的 “ 异 父 或 异 母 元 腊 F 
(C.C. Li) 和 路 易 斯 。 沙 克 斯 CLouis Sacks) 指出 了 这 一 错误 ， 并 给 出 了 正确 的 公式 ， 用 随机 和 矩阵 
导出 了 联合 分 布 及 亲属 之 间 的 关系 ， 参 见 Biometrika,40(1954),347 一 360. 


36. 


37. 


38. 


39. 


40. 


9.8 J 题 ill 


Bie? = pa Put Piz put Pis Par. 

LERE Cp) EIERE Cpa) 的 平方 ] 
证 明 在 已 知 革 人 的 异 父 〈 或 异 母 ) 弟兄 属于 遗传 型 i 的 条 件 下 ， 此 人 属于 遗传 型 上 的 条 件 
概率 也 是 py. 
证 明 在 已 知 某 人 的 祖父 (或 孙子 ) 属于 遗传 型 i 的 条 件 下 ， 此 人 属于 遗传 型 & 的 条 件 概 

PE = PP pu + pE pa t+ pE pu = papie + pep + Pa PR. 
(BRE Cp) 是 矩阵 (a) 的 三 次 方 . 这 种 手续 给 出 了 亲属 关系 的 等 极 概念 以 一 种 明显 
的 意义 . | 
更 一 般 地 ， 我 们 定义 PW: 在 已 知 某 人 属于 遗传 型 i 的 条 件 下 ， 其 某 一 个 第 n 代 子孙 属 
于 遗传 型 & 的 条 件 概率 .试用 归纳 法 证 明 : pp 人 8 是 下 面 这 一 个 矩阵 的 元 素 


pe + pa/2™ 2ta +a p) /2 éé 
p+ plqa— D/Z 2pg+(l—4p9)/2” g++a(p—q)/> 
pe — peer 2pq+ p(p—@)/2™ og + pq /2™ 


(这 表明 : 一 代 一 代 传 下 去 以 后 ， 祖 先 对 子孙 的 影响 逐渐 下 降 ， 其 比例 因子 为 1/2. ) 
再 考虑 习题 36， 不 过 要 把 “ 异 父 (或 异 母 ) 兄弟 ” 代 之 以 “ 亲 兄 弟 ” 证 明 ; 这 时 对 应 的 
和 矩阵 为 


i 2 i 1 . 
git P? > al + p) 44 

l | 1 

= pA + p? — (1+ pq) —q1+q 
4 4 4 

1 < i I 2 
1? > PAg) Ato 


EHAE RRR SRSARLADT SAH RMA SREE. 


第 6 和 草 二 项 分 布 与 泊 松 分 布 


6. 1 伯 努 利 试 验 序列 


在 重复 的 独立 试验 中 ， 如 果 每 次 试验 仅 有 两 个 可 能 结果 ， 而 且 其 相应 的 概率 在 
每 次 试验 中 都 是 相同 的 ， 则 称 这 一 串 重 复 的 独立 试验 是 伯 努 利 试验 序列 、 我 们 经 常 
以 p,q 表示 两 个 相应 的 概率 ,并 将 具有 概率 p 的 可 能 结果 称 为 “成 功 ”"， 记 以 S， 而 
另 一 个 可 能 结果 则 称 为 “失败 ”"， 记 以 F， 显 然 ，p 与 gq 应 该 是 非 负 的 ， 并 有 
p+q=l. (1.1) 
每 次 试验 所 对 应 的 样本 空间 是 由 两 个 样本 点 S 与 下 组 成 的 , 而 次 伯 努 利 试验 的 
样本 空间 则 含有 2" 个 样本 点 ， 它 就 是 由 nn 个 符号 S 与 王 所 组 成 的 排列 ， 每 个 排列 表 
示 联 合 试验 中 的 一 个 可 能 结果 . 因为 试验 是 独立 的 ， 所 以 它们 的 概率 是 等 于 各 个 概 
率 的 乘积 ， 换 言 之， 每 一 给 定 排 列 的 概率 可 由 下 面 的 方法 得 出 ， 在 排列 中 用 p,g 分 
别 代 冷 SF 后 ， 所 得 的 一 个 乘积 便 是 所 要 的 概率 ， 因 此 
P{((SSFSF…EFFS) ) = ppgpgq'"*qgp. 
Ol ” 伯 努 利 试验 序列 的 一 个 最 为 熟悉 的 例子 是 连续 扔 一 个 均 习 的 便 和 而 ， 此 时 p= 
9q 二 1/2， 如 采 人 硬币 是 不 均匀 的 ， 且 我 们 假设 连续 扔 硬币 的 试验 是 独立 的 ， 则 我 们 也 
得 到 了 伯 努 利 试验 序列 的 模型 ， 不 过 此 时 成 功 的 概率 户 可 以 是 0 与 1 之 间 的 任何 数 
值 :， 每 次 都 从 一 个 包含 有 个 红 球 6 个 黑 球 的 罐子 中 重复 地 随机 取 球 ， 这 种 取 球 代 
表 一 串 具 有 zj 三 /Cr 十 所 的 们 努 利 试验 . 有时， 一 个 试验 会 有 好 儿 个 可 能 的 绪 采 ， 但 
我 们 并 不 注意 各 个 结果 的 区 别 ， 而 是 把 这 些 结果 简单 地 区 分 为 两 组 A BSE A. 例如 ， 
掷 一 个 均匀 的 骨 子 ， 则 么 点 出 现 O 与 非 么 点 出 现 OF) 的 区 别 便 导 致 一 个 伯 努 利 


试验 ， 此 时 p= 去; 侦 数 点 出 现 与 奇数 点 出 现 的 区 别 也 导致 _ 个 成 功 概率 p= h 


努 利 试验 ， 吞 骨 子 是 不 均匀 的 ， 则 重复 据 钥 子 也 组 成 一 串 介 努 利 试验 ,但 是 成 功 的 
概率 户 可 有 各 种 不 同 的 数值 ， 扑 克 中 的 最 大 同人 花 或 搓 两 颗 通 子 都 出 现 么 点 郡 可 以 用 
成 功 来 表示 ， 而 所 有 其 他 的 可 能 结果 的 出 现 用 失败 表示 ， 则 我 们 有 成 功 概率 分 别 为 


P= aay pag th p== 杰 的 伯 努 利 试验 ， 在 统计 应 用 中 常常 把 问题 化 为 这 种 类 型 来 处 理 ， 
例如 ， 在 大 量 制 造 垫 螺钉 的 小 铁 片 时 ， 铁 片 的 厚度 可 有 各 种 不 同 的 数值 ， 但 是 ， 在 


l. James Bernoulli (1654 一 1705)， 他 的 主要 著作 “Ars conjectandi” F 1713 年 出 版 
2. 这 里 原 书 说 任意 数值 ， 应 该 说 是 0 与 1 之 间 的 任意 数值 . PES YE 
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产品 检查 中 ， 我 们 往往 把 铁 片 的 厚度 分 为 两 类 ， 即 如 果 厚 度 在 预先 规定 的 范围 内 ， 
则 称 为 合格 (S)， 反 之 则 称 为 不 合格 (P). > 

伯 努 利 坛 验 序列 是 一 个 理论 的 模型 ， 并 且 ， 用 它 来 描述 某 一 指定 的 实际 试验 是 
否 合 适 仅 能 由 经 验 来 判断 .关于 连续 扔 一 个 硬币 是 伯 努 利 模型 的 知识 是 由 实验 的 证 
据 推导 出 来 的 ， 普 通 老百姓 和 哲学 家 马 们 ':(K. Marbe) 都 相信 在 连续 出 现 17 次 的 
“正面 ”后 ,“ 反 面 ” 的 出 现 的 可 能 要 大 ， 这 个 主张 并 不 牵涉 到 硬币 完善 不 完善 的 问 
匮 ， 而 是 把 记忆 力 赋予 了 和 白 然 界 ， 也 就 是 (用 我 们 的 语言 来 说 ) 否认 了 逐次 试验 的 
独立 性 马 伯 的 理论 不 能 用 逻辑 来 驭 倒 ， 但 是 ， 由 于 它 缺 乏 经 验 的 支持 ， 我 们 还 是 
拒绝 接受 它 . 

在 抽样 实践 ， 工 业 的 质量 控制 等 等 中 ， 们 努 利 试验 序列 的 模型 提供 了 一 个 理想 
的 标准 ， 虽 然 这 标准 从 来 不 能 完全 达到 .在 上 面 所 讲 的 垫 螺钉 的 铁 片 制造 的 例子 中 ， 
有 许多 理由 说 明 为 什么 产品 不 能 形成 们 努 利 模型 ， 例如， 由 于 机 和 硕 的 必然 引起 的 变 
化 使 得 概率 不 能 保持 为 常数 ”机 器 的 运转 有 惯性 的 倾 铝 ， 因 此 ， 同 类 偏差 的 长 连贯 
的 出 现 ， 要 比 各 次 动作 均 为 独立 的 情况 下 更 为 概 然 ， 但是， 从 质量 控制 的 观点 来 看 ， 
我 们 愿意 生产 过 程 符 合 一 个 伯 努 利 模型 ， 一 个 重要 的 发 现 是 ， 在 一 定 范围 之 内 ， 生 
产 过 程 是 可 以 达到 这 个 要 求 的 ， 这 样 一 来 ， 连 续 控 制 的 目的 ， 就 是 要 及 早 地 发 现 与 
理想 模型 显著 的 偏离 ， 并 利用 它 作为 就 要 发 生 毛 病 的 警报 . 
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在 nn 次 伯 努 利 试验 中 ， 我 们 往往 只 关心 成 功 的 总 次 数 而 不 计较 成 功 的 排列 次 序 . 
由 于 成 功 的 总 次 数 可 能 是 0,1,…,n， 因 此 ， 我 们 的 第 一 个 问题 是 求 出 它们 相应 的 概 
率 ， 但 在 “n 次 试验 里 有 上 RRJ., nok 次 失败 ”的 出 现 可 以 有 许多 的 方式 ， 其 方式 
的 个 数 就 等 于 个 文字 S 在 n 个 位 置 上 的 所 有 可 能 分 配 法 ， 换言之， 这 一 事件 共 含 有 


(2 ) 个 样本 点 ， 并 且 ， 由 定义 ， 每 点 的 概率 都 是 pr9”*， 于 是 ,我 们 证 明了 下 面 的 


定理 . 
定理 令 b(k;n,p) 是 具有 成 功 概 率 为 p， 失 败 概率 为 gq 二 1 一 的 n 次 伯 努 利 试 验 
中 ， 有 上 次 成 功 ，n 一 上 次 失败 的 概率 ， 则 
bkn p) = (7 pa. © D 
特别 ， 未 成 功 的 概率 是 中 ， 而 至 少 有 一 次 成 功 的 概率 是 1 一 g. > 
我 们 考虑 p HAM, MASS, An 次 试验 的 成 功 次 数 ， 则 6b(k;n, p) = PiS, = 
k}、 用 一 般 的 术语 来 说 ，S, 是 随机 变量 ， 函 数 (2.1) 是 这 个 随机 变量 的 “分 布 ”， 


1. 参见 [34j， 关 于 马 伯 的 理论 ， 有 许多 批评 的 文章 . 
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我 们 将 称 这 个 分 布 为 二 项 分 布 ， 因 为 (2.1) 是 (p 十 g)" 的 二 项 展开 式 中 的 第 有 十 1 
项 ， 所 以 我 们 有 “二 项 ”两 字 的 名 称 ， 这 个 解释 还 指出 来 5(0;n,) 十 5b(1;n, 思 ) 十 … 十 
bln;n;p) 二 (p 十 g)" 二 1， 这 也 正 是 概率 的 概念 所 需要 的 ， 二 项 分 布 有 表 可 查 . 

例 (a) RRM (Weldon) WEFR. WMH RE 12S. Jf 


设 出 现 点 数 5 与 6 是 “成 功 ” MRERTEZSH, MRO p=. TE R 


功 次 数 的 概率 将 由 二 项 分 布 5(&; 12, 与 ) 来 表达 ， 表 6-1 给 出 了 这 些 概率 以 及 在 


26,306 次 的 实际 试验 中 所 得 到 的 相应 的 观察 的 平均 频率 ， 这 两 者 的 相合 性 看 起 来 似 
乎 是 不 错 的 但是， 对 于 如 此 大 量 的 数据 来 说 ， 符 合 程度 其 实 是 很 不 够 的 .统计 学 
家 常常 用 卡 方 准则 来 判 源 拟 合 的 程度 ， 根 据 这 个 准则 ， 对 于 均匀 的 骨 子 而 言 ， 像 威 
尔 顿 观察 到 的 那样 大 的 偏差 只 有 万 分 之 一 的 发 生 概率 ， 因 此 ， 我 们 有 理由 认为 散 于 
是 有 偏 的 ， 当 成 功 的 概率 改 为 p=0. 3377 时 ， 最 符合 于 我 们 的 观察 结果 . 

(b) 在 4.4 节 当 我 们 考虑 牌 的 猜测 问题 时 ， 曾 经 遇 到 过 二 项 分 布 ， 那里 的 表 4- 3 
Hh 诸 列 列 出 了 n= 二 3,4,5,6,10 和 p=n “1! 时 分 布 中 的 各 项 .在 2.4 节 例 (c)》 WA 
间 题 中 ， 我 们 找 出 了 公式 〈4.5)， 它 是 二 项 分 布 的 另 一 个 特殊 情形 . 


6-1 MKABRFICRR 


k b (k;12,1/3) 观察 的 频率 b (k;12,0. 3377) 
0 0. 007 707 0. 007 033 0. 007 123 
1 0. 046 244 0. 043 678 0. 043 584 
2 0.127 171 0. 124 116 0.122 225 
3 0. 211 952 0. 208 127 0. 207 736 
4 0. 238 446 0. 232 418 Q. 238 324 
5 0. 190 757 0. 197 445 0. 194 429 
6 0. 111 275 0. 116 589 0. 115 660 
7 0. 047 689 0. 050 597 0. 050 549 
8 0. 014 903 0. 015 320 0. 016 109 
9 0. 003 312 0. 003 991 0. 003 650 
10 0. 000 497 0. 000 532 0. 000 558 
11 0. 000 045 0. 000 152 0. 000 052 
12 0. 000 002 0. 000 000 0. 000 002 


(c) 如 果 成 功 的 概率 是 0. 01， 问 需要 有 多 少 次 试验 才能 使 得 至 少 出 现 一 次 成 功 的 
概率 是 1/2 或 更 大 ?此 时 ， 我 们 是 求 最 小 的 mw HB I— (0.99 SZ. REN 


log(0. 99) log 2， 因此 2? 之 70. 
Cd) 能 量 供应 问题 ， 假定 有 一 10 个 工人 间 欣 性 的 使 用 电力 ， 我 们 感 兴趣 的 是 信 


1. 原 书 为 第 上 项 ， 是 错 的 ， 应 为 第 上 十 1 项 ， 一 一 详 者 注 


6.3 中 心 项 及 尾 项 115 


计 所 需要 的 总 负荷 ， 作 为 一 种 粗糙 的 近似 ， 我 们 设想 在 任何 一 个 给 定时 刻 每 一 个 工 
人 以 同样 的 概率 p 需 要 一 个 单位 电力 ， 如 果 他 们 是 独立 地 进行 工作 ， 则 恰 有 个 工 
人 同时 需要 电能 的 概率 是 6(k;n,p)， 如 果 一 个 工人 在 一 小 时 内 平均 有 12 分 钟 需要 电 


能 ， 则 我 们 令 p= 三 ， 于 是 在 同时 有 七 个 或 者 七 个 以 上 的 工人 需要 电能 的 概率 为 


b (7;10,0.2) 十 … 十 5 (10;10,0. 2)=0. 000 864 358 4. 换 句 话说 ， 如 果 最 多 只 能 供应 
6 个 单位 电力 ， 则 超过 负 傈 的 概率 为 0.000 86…， 即 是 1157 分 钟 内 约 有 一 分 钟 ， 亦 
«BDAY 20 个 工作 时 中 可 能 有 一 分 钟 超过 人 负荷 ， 八 个 或 八 个 以 上 的 工人 同时 需要 电能 的 
概率 仅仅 为 0. 000 077 926 4， 即 比 上 述 概 率 的 1/11 BE). 

(e) 血 清 或 防疫 检验 .假定 某 种 疾病 在 牲畜 中 传染 的 一 般 比 例 是 百 分 之 二 十 
五 ， 为 了 检验 一 种 新 发 现 的 血清 ， 我 们 给 nn 个 健康 的 牲畜 都 注射 这 种 血清 ， 我 们 如 
何 用 数字 来 表示 这 一 试验 的 结果 呢 ?” 如 果 这 种 血清 完全 不 起 作用， 则 这 nn 个 被 注射 
的 牲畜 中 恰 有 & 个 不 感染 这 种 疾病 的 概率 为 (kin, 0.75). 4 k=n=10 时 ， 这 个 概 
率 大 约 为 0.056, mM k=n=12 时 ， 这 个 概率 只 有 0.032， 因 此 ， 如 果 10 个 或 者 12 
个 牲畜 中 没有 一 个 感染 这 种 疾病 ， 那 么 我 们 就 可 以 用 它 指明 这 种 血清 是 有 歼 的 ， 虽 
然 这 还 不 能 作为 最 后 的 论断 .注意 : 如 果 不 注射 血清 ，17 个 牲畜 中 至 多 只 有 一 个 感 
染 这 种 疾病 的 概率 大 约 为 0.0501， 因此 ，17 个 被 注射 的 牲畜 中 只 有 一 个 感染 病 比 10 
个 被 注射 的 牲畜 中 没有 一 个 感染 病 更 能 说 明 这 种 血清 有 效 ， 当 nn 二 23 时 ， 至 多 有 两 
个 牲畜 感染 疾病 的 概率 大 约 为 0.0492， 因 此 ，23 个 牲畜 中 只 有 两 个 感染 疾病 又 比 17 
个 中 只 有 一 个 感染 疾病 ，10 个 中 没有 一 个 感染 病 更 能 说 明 血 清 之 有 效 性 . 

(f) 另 一 种 统计 检验 .假定 nn 个 人 服用 某 种 药 后 量 他 们 的 血压 ， 不 服用 时 也 量 他 
们 的 血压 . 因此， 得 到 两 组 测量 结果 a, A, WRT: WRNI 
说 第 i 次 试验 的 结果 是 成 功 ， 如 果 x, 宝 x ;， 则 说 第 i 次 试验 的 结果 是 失败 . (为 了 简 
单 起 见 ， 我 们 假定 没有 两 个 测量 的 结果 相等 . ) 如 果 这 种 药 没 有 效果 ， 则 我 们 的 观 


察 对 应 着 具有 概率 p= 方 的 次 伯 努 利 试验 ， 成 功 的 次 数 很 多 ， 就 可 以 作为 这 种 药 
是 有 效 的 一 个 证 据 . > 
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M (2.1) 我 们 看 到 


blk;nsp) _ azakt Dp _ , + fer Dp—k (3.1) 
b(k—13;n,p) kq kq 


A, 4 k< (ntl) pit, b(k;n,p) Eblk— lin p) KR; k> (ntl) p 时 ， 
bikin spb blk ln, ps. Bin tlDp=m ERA, Wi bmn. p)=b(m—13n,p). 
恰巧 存在 一 个 整数 mm TE 

(n+ ID)p—l<m (nt l)p, (3.2) 
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因此 我 们 有 

定理 khoa) n, bkin pkan m, maT, 而 且 在 
k=mát ik Sa CORK, 124 m=lntl)p tt, bln—l;n,p)=5bln;n, p). 

我 们 称 bCm;n,p) 为 中 心 项 ，m 通常 称 为 “成 功 的 最 大 概 然 次 数 ”, 但 是 ， 必 须 
了 解 ， 当 很 大 时 ， 所 有 的 5k&;n,p) 都 很 小 ”把 一 个 均匀 的 硬币 扔 100 次 ， 正面 出 
现 的 最 大 概 然 次 数 是 50， 但 是 正面 出 现 50 次 的 概率 比 0.08 还 小 ， 在 下 一 人 里 ,我 
们 将 要 证 明 5Cm;n,p) 近 似 地 等 于 (2rmpg) 3, 

我 们 对 恰巧 成 功 r 次 的 概率 不 大 感 兴 趣 ， 而 感 兴 趣 的 是 下 面 的 至 少 成 功 r 次 的 
概率 ，; 


PiS, = = Sorte np), (3.3) 


(此 级 数 形式 上 有 无 穷 多 项 ， 其 实 当 心 xz 时 对 应 之 诸 项 皆 为 0 ) 我 们 将 推出 此 概 
率 之 上 土 界 ， 这 很 有 用 ， 尽 管 下 一 章 会 找 出 它 的 有 效 的 估计 . 假定 ron. 由 (3.1) 
易 见 : 级 数 (3.3) 下 降 得 比 具有 公 比 1 一 (r 一 np)/raq 的 几何 级 数 还 要 快 ， 因 此 


PiS, >r} br;n, D i: (3.4) 


另 一 方面 ， 存 在 多 于 r—np PBR Emr. RaR MARA) F 1, 
而 且 没 有 一 项 小 于 5 (ri n，p)， 由 此 推出 此 数 至 多 为 (r 一 np)”， 从 而 


P{S, Sr} < iy 当 r > np . (3.5) 


类 似 的 推导 可 以 应 用 到 计算 左 半 部 , 但 是 这 没有 必要 . 事实 上 , 说 “至 多 成 功 r 次 ” 
与 “至 少 失 败 n 一 r 次 ”是 等 价 的 ， 应 用 GD 的 等 价 形式 于 “失败 ”， 得 到 
PIS, < r) < SA, 当 < np, 


ry?’ 
下 一 RFRA RET “成 功 的 最 大 概 然 次 数 ” m 的 大 偏差 的 概 
率 中 的 应 
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我 们 曾经 几 次 地 提 到 过 概率 的 直观 概念 是 基于 以 下 的 假定 上 的 ， 如 有 果 在 n 次 相 
同 的 试验 中 ，A 发 生 v 次 ， 而且 令 n 很 大 ， 则 vw/n 将 接近 于 A 的 概率 p， 显 然 ， 一 种 
形式 上 的 数学 理论 从 来 不 可 能 与 现实 的 生活 直接 联系 起 来 ， 但 是 它 至 少 应 该 对 我 们 
所 要 解释 的 现象 提供 理论 的 描 象 ， 因 此 ， 我 们 要 求 把 刚才 说 的 那 句 不够 清楚 的 语 加 
以 精确 化 ， 而 叙述 为 定理 的 形式 ， 为 此 ， 我 们 理解 “相同 的 试验 ” 为 成 功 概率 是 p 
的 “ 伯 努 利 试验 ” 如 果 S, 是 n 次 试验 中 成 功 的 次 数 ， 则 S/n 是 成 功 的 平均 次 数 而 
有 目 接 近 于 p， 现 在 ,我们 可 以 很 容易 给 它 一 个 精确 的 意义 例如， 考虑 S,/n 超过 
pte (其 中 e>>0 是 一 个 任意 小 但 是 固定 的 常数 ) 的 概率 . 这 个 概率 就 是 PLS, >n 
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(pte), H 3.5) 知 它 小 于 等 于 1/(ne)， 因此!， 当 增加 时 ， 
PiS, > n(pte)} — 0. 
用 同样 的 方法 可 得 P (S, <n (p—e)} > 0, A, 我 们 有 


p||S- p <e} +1. (4. 1) 


ALERR, Bnd, RAPAS 户 的 偏差 超过 预先 指定 的 e 的 概率 趋 
于 0， 这 是 大 数 定律 的 一 种 形式 ， 并 且 它 是 把 概率 作为 相对 频率 的 一 个 度量 的 直观 概 
念 的 基础 ， 对 于 实际 应 用 必需 以 〈4. 1) 左边 的 概率 的 更 精确 估计 来 充实 。 这 样 一 个 
IEE NIG EASE IE PAW [参见 7.4 节 例 (h)]. 实际 上 公式 (4.1) 是 
7.7 节 习 题 12 的 一 个 简单 的 推论 . 

结论 (4.1) 是 古典 的 大 数 定律 ， 它 的 用 处 是 非常 有 限 的 ， 我 们 将 机 用 更 精确 更 
A FARR KS RR REE (参见 8.479). 

注意 ， 人们 常常 把 许多 不 能 从 大 数 定 律 推出 的 事件 也 诉 诸 予 大 数 定律 . 如 果 甲 
和 乙 扔 一 个 硬币 10 000 次 ， 常 常 这 样 希 望 : 甲 领先 的 次 数 大 约 为 一 半 . (He, BH 
不 对 的 ， 在 多 次 的 扔 硬币 的 游戏 中 ， 有 理由 期 望 : 在 任 一 固定 的 时 刻 ， 正 面 领 先 的 
场合 粗略 地 有 -一半 . 但是， 这 与 上 -个 例子 十 分 相像 ， 期 望 赢家 在 整个 游戏 过 程 中 
实际 上 都 领先 ， 事 实 与 我 们 普遍 的 想法 相反 ， 单 个 游戏 的 时 刻 平 均 与 给 定 任 一 个 时 
刻 的 整体 平均 完全 不 一 样 。 关 于 随机 起 伏 的 其 他 意 想不到 的 性 质 的 更 进一步 的 研究 ， 
读者 可 参阅 第 3 章 ， 特 别 是 关于 反正 弦 律 的 讨论 ，. 


6.5 YH MS 1 ir 


在 很 多 应 用 问题 中 ， 我 们 常常 遇 到 这 样 的 伯 努 利 试验 ， 其 中 ， 相 对 地 说 ，? 大 ， 
Pp 小， 而 乘积 
A = np (5.1) 
是 大 小 适中 的 ， 在 这 种 情形 下 ， 我 们 采用 6 kin p) 的 一 个 近似 公式 是 很 方便 的 ， 
这 近似 式 是 由 泊 松 得 出 的 ， 下 面 ， 我 们 将 推导 这 公式 ， 对 于 & 二 0 RIA: 


Konp = (1—p)" = (1-4). (5, 2) 
取 对 数 并 且 利用 泰勒 (Taylor) RAK [第 2 章 公式 8.10], RMA 
log bOn, p) =n log(1— è )=—-a =È = u, (5. 3) 
因此 ， 对 于 充分 大 的 nw， 有 
blO;n,p) Se, (5. 4) 


1. 原文 在 此 处 误 说 大 于 1/ (ne?)， 应 为 小 于 等 于 1/ (ne?)， 一 一 译 者 注 
2 Siméon D. Poisson (1781 一 1840)， 参 见 他 著 的 书 [37] 
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其 中 符号 六 表示 渐 近 相等 〈 在 现在 这 种 情形 下 ， 它 们 相差 阶 为 的 无 穷 小 量 )， 此 
外 ， 从 (3.1) 得 知 : 对 任 一 个 固定 的 & 和 充分 大 的 n 都 有 


bl(RkRsnp) .Ake—DPp A (5.5) 
bl(k— 1;n,p) kq T R? l 


从 (65.5) 我 们 相继 地 得 出 5(1;n, pA pCOsns PSAE bn p) A bll;n,p) 
see */2, 一 般 地 ， 由 归纳 法 我 们 得 到 
A A 
bkin, p) ~ pre . (5. 6) 


MESSMO eT. 由 于 其 重要 性 ， 我 们 把 (5. 6) 的 右 问 引进 一 个 
ics, + 

_, r* 
p(k;A) =e bt . 


采用 这 个 符号 ， 我 们 可 以 说 ， 当 充分 大 时 ，2(ks)) 是 bm 全 ) 的 近似 表达 式 


Gl (a)4.4 节 表 4-3 中 列 出 了 6.7) 式 中 当 4 二 1 时 的 泊 松 概率 ， 并 将 它 与 具 
有 p= 二 1/n，n 分 别 为 3,4,5,6,10 的 二 项 分 布 做 了 比较 . 即使 nn 很 小 ， 它 们 的 相合 性 
也 惊人 地 好 . 

(b) 一 个 经 验 解释 .100 对 随机 数字 中 ， 对 (7,7)〉 出 现 的 次 数 服 从 n= 100, 
力 二 0.01 的 二 项 分 布 ， 表 6-2 列 出 了 : 在 100 组 每 组 含有 100 对 随机 数 的 集合 中 ， 人 恰 
ZRA T, 的 组 数 :， 比 率 N,/100 与 理论 的 二 项 分 布 和 相应 的 泊 松 逼近 作 比 较 ， 
观察 到 的 频率 与 理论 概率 相当 符合 . 〈 如 用 这- 准则 来 判断 ，100 个 类 似 的 个 例 中 有 
75 例会 因为 随机 起 伏 而 产生 观察 频率 与 理论 概率 的 更 大 的 修 差 . ) 


表 6-2 泊 松 近似 的 一 个 例子 


(5. 7) 


N; 
0 0. 366 032 0. 367 879 4] 
l 0. 369 730 0. 367 879 34 
2 0. 184 865 0. 183 940 16 
3 0. 060 999 0. 061 313 8 
4 0.014 942 0.015 328 Q 
9 0.002 898 0. 003 066 1 
6 0. 000 463 0. 000 511 Q 
T 0. 000 063 0. 000 073 0 
8 ©. 000 007 0. 000 009 0 
9 0. 000 001 ©. 000 001 0 


头 三 列表 明了 二 项 分 布 的 泊 松 近似 ， 最 后 一 列 是 每 组 为 100 对 随机 数字 的 100 组 中 (7,7) 恰巧 出 现 k 
次 的 组 数 的 记录 ， 


1， 关 于 其 通 近 的 阶 ， 请 参见 6.10 节 习 题 33 和 34. 
2. 参见 [38]. 
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(c) 生 日 . 在 500 人 所 组 成 的 人 群 中 ， 恰 有 有 & 个 人 的 生日 是 元 旦 的 概率 p, 是 多 
少 ? 如 果 500 人 是 任意 选取 的 ， 则 我 们 可 应 用 成 功 概率 为 p 一 sss 的 500 MARPA 


验 的 模型 对 于 沼 松 近似 式 ， 我 们 设 A =500/365=1. 3699… 
正确 的 概率 及 其 油 松 逼近 如 下 : 
k 0 1 2 3 4 5 6 
二 项 0.2537 0.3484 0.2388 0.1089 0.0372 0.0101 0.0023 
泊 松 0.2541 0.3481 0.2385 0.1089 0.0373 0.0102 0.0023 


(d) 次 品 ， 设 螺丝 钉 的 生产 是 在 统计 的 质量 控制 下 进行 ， 于 是 容许 我 们 应 用 但 努 
利 试验 的 模型 ， 若 一 个 螺丝 钉 是 次 品 的 概率 为 p=0.015, MRA 100 个 螺丝 钉 的 盒 
中 没有 次 品 的 概率 是 (0.985) 一 0.22061， 其 对 应 的 泊 松 近似 值 是 e = 
0. 223 13…. 在 大 多 数 的 实际 问题 中 ， 这 样 的 近似 程度 已 是 相当 好 的 . 现在， 我 们 问 
一 盒 中 应 有 多 少 个 螺丝 钉 才能 使 得 其 中 含有 100 个 合格 钉 的 概率 大 于 或 等 于 0. 8? R 
100 十 x 是 所 需要 的 螺丝 钉 数 ， 则 z 必 是 一 个 小 的 整数 ， 应 用 泊 松 近似 式 于 2 一 100 十 
r, RIAS A=np, HF np 近似 于 1002=1.5， 故 我 们 所 求 的 > 是 满足 下 面 不 等 式 
的 最 小 整数 z; 


一 > 一 


efg E Jee p e |> 0.8, 5.8) 


SEA, Maiei G.D 的 左边 是 近似 于 (56， 而 二 2 mt, M 0.809. 因此 
从 泊 松 近似 式 可 得 出 如 下 的 结论 ， 即 所 需要 的 螺丝 钉 是 102 个 .实际 上 ， 在 一 盒 102 
个 螺丝 钉 中 ,含有 100 个 合格 钉 的 概率 是 0. 8022…. 

(e) 百 岁 的 人 ， 某 一 指定 的 初生 者 活 到 100 岁 的 概率 是 很 小 的 ， 而 同时 ， 在 一 
个 大 的 团体 中 ， 一 年 的 出 生 数 却 是 大 的 ， 由 于 战争 ， 传 染病 等 等 ,不 同人 的 寿命 不 
是 随机 独立 的 ， 不 过 ， 作 为 初次 近似 ， 我 们 可 将 nn 个 出 生 者 比喻 为 个 但 努 利 试 
验 ， 其 中 活 到 100 岁 以 后 才 死 的 就 算 “ 成 功 ” 在 一 个 稳定 的 团体 ， 也 即 团体 的 大 
小 与 死亡 率 认 为 是 不 大 改变 的 ， 我 们 有 理由 期 望 ， 恰 有 个 百 岁 老人 死 掉 的 那些 年 
头 的 频率 近似 于 p(X;X)， 其 中 和 依赖 于 团体 的 大 小 及 健康 情况 ， 瑞 士 的 记录 证 实 了 
这 结论 i 企 140 

(f) 印 错字 ， 葡 萄 和 干 ， 等 等 .， 设 在 一 本 书 的 印刷 中 ， 如 果 任 何 一 个 字 印 错 的 概率 
是 固定 的 ， 又 如 果 印 刷 的 条 件 保持 不 变 ， 则 我 们 有 与 字 的 个 数 一 样 多 的 们 努 利 试验 ， 
并 和 且 恰 有 上 个 错字 的 页 数 的 频率 将 近似 地 等 于 pC&;4)， 其 中 和 依赖 于 印刷 者 的 技术 
水 平 ， 印 刷 者 的 偶然 疲倦 或 困难 的 章节 等 等 都 将 增加 印 错 的 机 会 ， 并且 还 可 能 产生 
成 群 的 错字 ， 因 此 ， 泊 松 公式 可 用 来 发 现 对 于 均匀 性 或 统计 控制 的 过 分 偏离 类似 
的 推理 可 用 于 许多 其 他 的 情形 ， 例 如 ， 若 将 许多 葡萄 干 混合 到 一 堆 生 面团 中 ， 则 我 


参见 [39]. (这 是 给 出 数值 pCR Ag pk Hp k+l A + BRE , 其 中 从 0 变 到 100. ) 
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们 可 期 户 怡 有 & 粒 葡萄 干 的 面包 的 个 数 的 频率 近似 地 等 于 p(k;X)， 而 4 是 生 面团 中 
第 萄 十 的 密度 ， > 


6.6 YH MS oD Af 


在 前 一 节 中 ， 我 们 仅仅 用 泊 松 表达 式 (5.7) FEA n Kp PHIM HH 
适 的 近似 式 ， 关 于 第 4 章 的 相合 问题 与 占 位 问题 ， 我 们 曾经 研究 过 各 种 不 同 的 概率 
分 布 ， 而 这 些 分 布 的 极限 形式 也 是 泊 松 表达 式 p(k;4)， 这 正 是 下 述 的 值得 注意 的 事 
实 的 特殊 情形 : 有 几 个 具有 高 度 普遍 性 的 分 布 在 极其 多 种 多 样 的 问题 中 出 现 ， 在 概 
率 论 中 常 遇 到 的 三 个 主要 分 布 居 一 现 分 布 正 态 分 布 〈 于 下 一 章 介绍 ) 与 泊 松 分 布 


, ae 
plk;A) = e> ah 


(6.1) 
后 者 我 们 将 加 以 讨论 . 

首先 注意 如 果 将 (6. D 的 右边 对 二 0,1,2,… 求 和 ， 则 得 到 ee Be 的 泰勒 级 
数 的 乘积 ， 因 此 ， 对 任何 固定 的 1， 所 有 的 p(%;4) 的 和 是 1， 于是， 我 们 可 以 设想 一 
个 理想 的 试验 ， 使 得 惟有 个 成 功 的 概率 是 PCA)， 我 们 将 说 明 : 为 什么 许多 物理 
试验 与 统计 观察 都 导致 泊 松 分 布 (6.1).， 下 一 节 的 例子 阑 明了 (6.1) 的 广泛 的 、 种 种 
重要 的 应 用 .只 能 在 随机 过 程 的 理论 中 才 明 显 地 看 出 泊 松 分 布 的 实质 〈 第 12.2 节 和 和 
第 17. 2 节 将 给 出 泊 松 分 布 的 一 个 新 的 描述 ). 

考虑 一 个 随时 间 而 发 生 的 随机 事件 序列 ， 例 如 放射 性 分 裂 ， 来 到 电话 总 机 的 了 旦 
唤 等 等 ， 每 个 事件 都 可 由 时 间 轴 上 的 一 点 来 代表 ， 而 我 们 所 关心 的 是 这 些 反 的 随机 
分 布 ， 这 分 布 有 各 种 不 同 的 类 型 ， 但 它们 的 研究 是 属于 连续 概率 的 范围 ， 我 们 预备 
在 第 二 卷 再 谈 ， 这 里 ， 我 们 将 满足 于 说 明 以 下 的 事实 : 在 最 简单 的 物理 假设 下 可 以 
得 出 ，p(&;4) 就 是 “在 一 个 指定 长 度 的 固定 区 间 内 有 《个 点 (事件 )” 的 概率 ， 本 市 
中 ， 我 们 所 用 的 方法 是 粗糙 的 ， 在 第 12 章 和 第 17 章 ， 我 们 将 以 更 适当 的 方法 来 处 理 
这 个 问题 . 

我 们 需要 把 以 下 两 个 物理 假定 用 数学 语言 表达 出 来 : (1) 对 时 间 而 言 ， 试 验 古 
在 固定 不 变 的 情况 下 进行 的 ;〈2) 在 不 相交 的 几 个 时 间 区 间 中 ， 事 件 的 发 生 次 数 是 
随机 独立 的 ， 在 连续 型 的 概率 理论 中 ， 我 们 可 以 直接 地 表达 这 些 陈述 ， 但 由 于 本 书 
限制 在 离散 型 的 范围 以 内 ， 我 们 只 得 先 用 一 个 近似 的 有 限 模型 ， 然 后 再 过 渡 到 极限 . 

我 们 想像 把 单位 时 间 区 间 分 成 为 数 很 大 的 n 等 分 ， 每 个 子 区 间 的 长 度 是 1/n， 该 
区 间 中 的 一 种 给 定 的 有 限 个 点 构成 的 族 ， 可 视 为 某 随机 过 程 的 一 个 结果 ， 此 过 程 满 
足 条 件 ， 其 中 每 个 子 区 间 含 有 该 点 族 中 的 点 数 大 于 或 等 于 1 的 概率 都 是 如， 于 是 一 
个 子 区 间或 者 是 空 的 ， 或 者 有 点 ， 不具 交 的 时 间 区 间 之 间 独 立 性 假设 使 我 们 可 以 用 
伯 努 利 试验 来 处 理 ， 假 定 一 个 子 区 间 恰 含 & 个 点 的 概率 为 56CRim p). RHEE R 
模型 用 n 一 oo 的 办 法 来 含糊 地 连续 化 ， 所 有 的 子 区 间 一 个 点 都 不 售 的 概率 必须 趋 于 一 


6.6 泊 松 分 布 12] 


个 有 限 数 . 但 是 ， 此 事件 是 “没有 一 个 盒 于 ”被 占 位 的 概率 ， 它 应 是 (1 一 p,)". W 
对 数 ， 发 现 欲 使 此 数列 趋 于 一 个 极限 ， 只 有 当 np, START. np, > co 这 种 
极端 情况 要 排除 ， 否 则 ， 即 使 在 极 小 的 区 间 ， 其 中 所 含 之 点 都 要 有 无 穷 多 个 ， 因 此 ， 
我 们 模型 要 求 存在 一 个 有 限 数 和 A， 使 np, 4， 在 这 种 情况 下 ， 恰 有 上 上 个子 区 被 占 位 
的 概率 趋 于 pC(4;4)， 因 为 我 们 考虑 的 是 单个 的 点 ， 从 而 被 占 位 的 盒子 的 个 数 在 极限 
情况 下 与 含 于 单位 时 间 区 间 的 这 一 族 点 的 个 数 一 致 .… 

在 应 用 中 ， 需 要 将 任意 长 度 为 上 的 区 间 来 取代 单位 区 间 ， 但 我 们 仍 将 此 长 度 为 
AKAS SFR. Ap, 的 意义 仍 如 前 ， 但 现在 子 区 间 的 个 数 由 最 为 靠近 nt 
的 整数 所 给 定 .， 取 极限 的 过 程 中 ， 除 了 、) 代 之 以 让 以 外 ， 其 他 过 程 完全 一 样 ， 这 使 
我 们 要 考虑 


ow cary” 


pkirt) = (6. 2) 


bHEAH MERE MADRE RRAMMR Habe, AKAD BEMAN 
一 点 发 生 的 概率 是 
pO; Aa) =e”, (6.3) 

从 而 ， 有 一 点 或 多 点 发 生 的 概率 是 1 一 e “. 

参数 和 是 一 个 物理 常数 ， 它 是 由 上 轴 上 随机 点 的 密度 来 决定 的 . ADK, RAM 
发 生 的 概率 (6. 3) 您 小 ， 设 一 个 物理 试验 大 量 的 重复 进行 例如 说 N 次 ， 并且 每 次 我 
们 都 记录 下 在 长 度 为 上 的 固定 区 间 内 事件 发 生 的 数目 ， 又 设 N, ÆRA k PERE 
的 次 数 ， 则 


NotN, +N, 十 … SN., (6.4) 

于 是 ,在 NN 次 试验 中 所 观察 到 的 点 的 总 数 是 | 
Ni +2N, +3N 3 +e = T, (6.5) 

并 且 其 平均 数 是 T/N. 如果 NN 很 大 ， 则 我 们 可 期 户 
N, = Np Ck; A) (6. 6) 


(这 是 概率 论 所 有 应 用 的 基础 ， 我 们 将 于 第 10 章 中 用 大 数 定律 给 予 证 明 且 加 以 精确 
化 ). 将 (6.6) 的 结果 代入 〈6.5)， 我 们 得 到 
Tœ Ni pQsat) + 2p(23At) + 3p(33at) +) 


= Ne*ar{1t+% Me 4 GE” owe} = Nae, (6.7) 


TÆ 


1. 这 里 视 一 个 区 间 为 一 个 盒子 ， 一 一 泽 者 注 

2. 其 他 的 可 能 设想 ， 我 们 的 模型 可 以 作为 研究 车 祸 的 合理 近似 ， 但 不 能 用 于 多 部 车 同时 撞 有 或 的 场合 ， 
因为 此 时 卷 进 车 祸 的 车 辆 数 超过 1， 从 而 要 考虑 单 点 ， 两 点 ， 三 氮 ， ， 等 等 .在 极限 情况 下 ， 
这 将 导致 需要 在 第 12 章 才能 研究 的 复合 泊 松 分 布 ， 从 更 一 般 的 过 程 的 观点 看 ， 我 们 此 处 仅仅 计算 
跳跃 数 ， 这 些 已 超出 我 们 的 研究 限制 了 . 
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Ms T/N. (6. 8) 

这 关系 式 提 供 了 一 个 从 观察 值 去 估计 4 以 及 将 理论 与 试验 相 比较 的 方法 ， 我 们 将 在 下 
一 节 的 例子 中 说 明 这 点 . 

空间 中 的 分 布 

我 们 已 考虑 过 随机 事件 或 随机 点 在 上 轴 上 的 分 布 问题 ， 但 同样 推理 可 以 应 用 到 平 
面 或 空间 上 的 点 的 分 布 ， 我 们 以 面积 或 体积 是 上 的 区 域 来 代替 长 度 是 上 的 区 间 ， 并 
且 ， 我 们 的 基本 假设 是 任何 固定 的 区 域 中 恰 有 & 点 发 生 的 概率 仅 与 区 域 的 面积 或 体 
积 有 关 ， 而 与 其 形状 无 关 ， 此 外 ， 我 们 还 有 与 以 前 相同 的 假设 : (1〉 当 :小 时 ， 在 体 
BA t 的 区 域 中 有 多 于 一 点 发 生 的 概率 与 1 相 比 较 而 言 是 小 的 ; (2) 不 相交 的 区 域 是 
彼此 独立 的 ， 为 了 求 出 在 体积 为 上 的 区 域 中 恰 有 和 点 发 生 的 概率 ， 我 们 将 区 域 分 成 许 
多 子 区 域 ， 并 用 次 试验 中 恰 有 次 成 功 的 概率 来 通 近 我 们 所 求 的 概率 . 这 就 是 说 忽 
略 了 同一 子 区 域 中 有 多 于 一 点 发 生 的 可 能 性 ， 但 由 假设 (1)， 当 ?一 ce 时 ， 其 误差 
FS. 于是， 在 取 极 限 以 后 ， 我 们 又 得 到 当 松 分 布 〈6. 2) . 天 空中 的 星体 ， 和 蛋糕 
Piya, HEMT PHAR. MRP BE, UR RR POW RS ae 
照 泊 松 定 律 来 分 布 ， 至 于 实例 ， 可 参看 6.7 TR b) 与 Ce). 


6.7 ”符合 泊 松 分 布 的 观察 结 采 


(a) KAD. 设 放射 性 物质 放射 出 a 质点 ， 在 时间: 内 到 达 指 定 区 域 的 质点 
数 ， 是 随机 事件 遵从 泊 松 定律 的 著名 例子 .当然 ， 由 于 物质 在 不 断 地 放射 ,时间 太 
长 的 话 ，a 质点 的 密度 就 要 下 降 . 但 是 ， 就 镭 而 言 ， 不 经 过 许多 年 ， 物 质 的 减少 是 党 
察 不 出 来 的 . 于 是 ， 对 于 较 短 的 时 间 区 间 ， 人 情况 可 考虑 为 不 变 的 . 因此 ， 这 现象 满 
足 导 出 泊 松 分 布 的 理想 假设 . 

在 一 个 著名 的 放射 性 物质 的 试验 中 心 ， 我 们 观察 N=2608 次 ， 而 时 间 区 间 是 
7.5 秒 ， 并 且 每 次 都 记录 下 到 达 指 定 区 域 的 质点 数 . 表 6-3 给 出 有 上 个 质点 的 区 间 数 
N., MAS Ma T= DERN, =10 094， 平 均 数 是 TVN==3.870， 理 论 数 值 NOCR; 
3. 870) 是 很 靠近 于 观察 数值 N. 的 .要 判断 两 者 的 拟 合 程度 ， 我 们 需要 对 随机 起 伏 的 
可 能 范围 进行 估计 .统计 学 家 是 用 x -检验 来 判断 拟 合 度 的 ， 由 这 个 准则 ， 人 们 可 预 
期 在 理想 的 条 件 下 ，100 个 类 似 的 情形 中 ， 大 约 有 17 个 的 拟 合 程度 比 表 6- 3 HER. 

(b) 投 在 伦敦 的 飞弹 .作为 随机 点 的 空间 分 布 的 例子 ,我们 考虑 第 二 次 世界 大 
战 中 投 在 伦敦 南部 的 飞弹 的 统计 ， 将 整个 面积 分 为 N= 二 567 块 小 面积 ， 每 小 块 面积 
是 1/4 平方 公里 ， 表 6-4 记录 了 中 有 个 飞弹 的 面积 数 Ni. :投下 飞弹 的 总 数 是 本 二 


1. 泊 松 分 布 有 时 称 为 小 数 律 或 稀有 事件 律 . 这 些 称谓 难以 接受 且 对 泊 松 分 布 在 实践 中 的 重要 性 有 损 . 
下 面 的 例子 说 明确 实 如 是 . 
2. 这 数字 是 由 文章 [42] 得 出 的 . 
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IRN, 一 537， 平 均 数 是 万 =TVN=0.9323…， 这 观察 结果 对 泊 松 分 布 的 拟 合 程度 是 
很 好 的 .由 x -检验 可 知 ， 在 理想 的 条 件 下 ，100 次 比较 中 大 约 有 88 次 的 拟 合 度 比 
这 观察 结果 的 拟 合 度 还 要 差 . 我 们 有 兴趣 的 是 ， 大 多 数 人 都 相信 受 弹 点 有 聚 结 的 倾 
向 ， 若 果真 如 此 ， 中 弹 很 多 的 地 区 与 没有 中 弹 的 地 区 岂 不 是 要 多 些 ， 而 中 间 的 情形 
要 少 些 呢 ? 然而 表 6-4 却 明白 地 表 出 完善 的 随机 性 与 均匀 性 . 这 个 例证 说 明了 一 个 
公认 的 事实 : 随机 性 在 没有 经 过 训练 的 人 的 思维 中 ， 就 会 成 为 有 规则 性 或 有 聚 结 的 
(iil [ay . 


% 6-3 例 (a): 放射 性 分 解 


k N, Np (k; 3.870) k Ng Np (k; 3.870) 

0 57 54. 399 5 408 393,515 

l 203 210. 523 6 273 253. 817 

2 383 407. 361 7 139 140. 325 

3 525 525. 496 8 45 67. 882 

4 532 508. 418 9 27 29. 189 

h==10 16 17.075 

总 ” 数 2608 2608. 000 

表 6-4 例 (b): 投 在 伦敦 的 飞弹 
k 0 1 2 3 4 5 以 上 
N; 229 211 93 35 7 l 

Np (k; 0. 9323) 226.74 211. 39 98, 54 30. 62 7.14 1.57 

eee ee 


Cc) 细胞 中 染色 体 的 交换 . X 射 线 的 照射 产生 了 有 机 细胞 中 的 某 种 变化 过 程 ， 这 
种 过 程 叫 作 染色 体 的 交换 ， 在 连续 照射 的 过 程 中 ， 发 生 交换 的 概率 是 保持 不 变 的 . 
按照 理论 ， 恰 有 上 个 交换 发 生 的 细胞 数 N; 服从 泊 松 分 布 ， 而 且 理 论 上 还 可 预言 参数 
与 照射 强度 、 温 度 等 等 的 关系 但是， 我 们 不 打算 详细 讨论 这 内 容 ， 表 6- 5 记录 了 
11 种 不 同 试验 的 结果 . 它们 是 按照 拟 合 度 排列 的 .最 后 一 列 给 出 了 与 理想 情形 的 通 
近 的 百分比 ， 在 这 种 理想 情形 中 ， 随 机 起 伏 使 得 拟 合 度 更 差 (用 x -标准 检验 )， 理 
ice SWABS eS A aT a. 

(d) 电话 接 错 . 表 6- 6 是 电话 接 错 的 一 个 统计 :， 其 中 被 观察 的 电话 呼叫 次 数 共 
有 N=267%, M N 表示 恰 有 次 接 错 的 电话 数 ， 我 们 再 一 次 看 到 ， 注 松 分 布 ps 
8.74) 对 这 观察 结果 的 拟 合 程度 是 很 好 的 〈 由 -检验 ， 偏 差 靠 近 于 中 值 )， 在 论文 
[43] 中 ， 读 者 可 以 找到 遵从 泊 松 定律 的 其 他 电话 统计 .在 某 些 情形 (例如 有 分 机 的 
团体 线 及 公用 电话 等 ) 事件 之 间 是 有 明显 的 依赖 关系 的 ， 此 时 ， 泊 松 分 布 就 不 能 适 
A RZ T. 


1. 这 统计 表 是 由 论文 [43] 中 得 来 的 ， 这 论文 含有 32 种 不 同 统计 表 的 图 形 分 析 . 
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表 6-5 例 (e): 由 于 和 射线 的 照射 而 引起 的 染色 体 的 交换 


A 有 上 个 交换 的 细胞 ayy EAE 
N 
观察 值 N; 5 1073 95 
Np (k; 0. 35508) 6, 
观察 值 N: 9 
2 85 
Np (k; 0. 45601) 7. 
观察 值 N: l 
3 65 
Np (k; 0. 27717) l. 
观察 值 N 0 
4 65 
Np (k; 0.11808) 0. 
观察 值 NA 3 
5 45 
Np Ck; 0. 25296) l. 
观察 什 N: 0 
6 45 
Np (k; 0.21059) 1, 
WME N: } 
7 40 
Np (k; 0. 28631) l. 
观察 值 NN 2 
8 35 
Np (k; 0.35372) 3, 
观察 值 NN 5 
9 20 
Np (k; 0. 39867) 9. 
观察 值 N: 3 
10 20 
Np (k; 0.40544) f. 
4 观察 值 N; l 5 
Np Ck; 0. 49339) 
6-6 Gil 
k N Np(lk;8.74) k N: NpCk,8. 74) 
0—2 1 2.05 11 20 24. 34 
3 5 4. 76 12 18 17. 72 
4 11 10. 39 13 12 11. 92 
5 14 18. 16 14 7 7. 44 
6 22 26. 45 15 6 4. 33 
7 43 33. 03 >16 2 4. 65 
8 31 36. 09 267 267. 00 
9 40 35. 04 
10 35 30. 63 


(e) 数 细菌 与 数 血球 ， 图 6- 1 表示 涂 上 细菌 群 的 Petri 片 的 照相 ， 在 显微镜 下 观 
看 细菌 群星 现 为 黑 点 ， 将 片 分 成 一 些小 方块 ， 对 于 八 种 不 同 的 细菌 作 实 验 ， 表 6- 7 
记录 了 怡 有 上 个 黑 点 的 小 方块 数 ' 中 ， 这 里 ， 我们 得 到 了 泊 松 分 布 应 用 于 随机 品 的 空 
间 分 布 的 一 个 重要 的 实际 典型 例子 . 
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图 6-1 细菌 在 标本 片上 
表 6-7 Fl (e): 细菌 的 分 布 


水 平 
观察 值 N: ov 
泊 松 理论 值 | 6.1 18. 0 26.7 26. 4 19.6 

同 上 66 
27.5 42. 2 32.5 16.7 9. 1 
59 86 
fF] E 26 
82. 2 60. 8 30. 0 15.4 
63 
H E 97 


a 
Hr 


12.0 7.9 7.1 


3.9 10. 4 

RO TEE 

同 78 
62. 6 75.8 45.8 18.5 7.3 


的 最 后 一 个 数据 都 包含 了 更 高 分 组 的 图 形 ， 因 而 应 该 标 以 “上 或 者 更 多 个 ”. > 


6. 8 等 待 时 间 ， 负 二 项 分 布 


考虑 次 相继 的 伯 努 利 试 验 ， 我们 问 ; 一 直到 出 现 第 -次 成 功 为 止 到 底 需 要 做 多 
少 次 试验 ， 其 中 > 是 一 个 固定 的 正 整 数 ， 当 然 , 2 次 试验 的 成 功 次 数 可 以 少 于 ~,， 但 


Fall 
H 


本 
Fr 


126 第 6 章 二 项 分 布 与 泊 松 分 布 


第 r 次 成 功 发 生 在 第 vn 次 试验 的 概率 不 依赖 于 n， 而 只 依赖 于 w,r 和 p.， 因 为 一 定 
有 v 宇 r， 所 以 我 们 愿意 把 wv 写作 ww 二 r 十 &， 第 r+ 次 成 功 发 生 在 第 r 十 次 试验 (其 中 
k 一 0,1,…) 的 概率 用 fir, DRA. 它 等 于 在 了 次 成 功 之 前 恰 有 有 次 失败 的 概 
率 ， 而 这 个 事件 的 发 生 ， 当 且 仅 当 r 十 & 一 1 次 试验 中 恰 有 次 失败 而 下 一 次 〈 即 第 


+k 次) 一 定 出 现成 功 ,但 它们 的 概率 分 别 为 (”%“) pod 和 p， 所 以 
fk;r;p) = (ret). pot. (8.1) 
用 第 2 章 (12.4) 把 二 项 式 系数 改写 一 下 ， 便 得 另 一 形式 : 
rr __ a 
flRirsp) = ( Sra Dtk = 0,1l, 2, (8. 2) 


现在 假定 伯 努 利 试验 一 直 继 续 ， 直 到 第 次 成 功 出 现 为止 ， 一 个 标准 的 样本 点 可 
以 用 这 样 一 个 序列 来 表示 : BOA RAF (任意 ) 恰 有 > 个 SS 而且 序列 的 最 后 字母 是 
S， 由 定义 ， 这 样 的 点 的 概率 为 pa. Am, KYA: 试验 一 直 做 下 去 ， 无 法 结 
束 的 可 能 性 是 否 存 在 ， 也 就 是 说 ， 是 否 有 无 穷 试 验 序 列 ， 其 成 功 次 数 少 于 rr， 因为 


> r p 是 第 * 次 成 功 发 生 在 有 限 次 试验 的 概率 ， 因 此 ， 一 个 无 穷 试验 序列 中 所 
包含 的 成 功 次 数 少 于 + 这 个 事件 不 可 能 发 生 当 且 仅 当 


> flir, p) = 1, (8. 3) 
这 是 对 的 ， 因 为 由 二 项 定理 有 
> (S p= A=" =p". (8. 4) 


k=0 


将 (8.4) ÆA p 我们 得 到 (8. 3). 

在 我 们 的 等 待 时 间 问 题 中 ，r 必须 是 固定 的 正 整 数 ， 但 是 由 (8.1) 或 (8.2) 所 
定义 的 量 是 非 负 的 ， MA (8.3) 对 任何 正 数 r 都 成 立 ， 对 于 任何 一 个 固定 的 实数 
r>0 和 0 二 p 过 1， 序 列 {f(k;r,pP)} 叫 作 负 二 项 分 布 . 在 很 多 应 用 中 会 磁 到 这 一 分 布 . 
(在 5.8 节 习题 24 里 它 是 作为 波 利 亚 分 布 的 极限 形式 出 现 的 . 〉 当 rr 为 正 整 数 时 ， 
{f(k;r,p)}) 可 以 解释 为 第 r 次 成 功 所 需 之 等 待 时 间 的 概率 分 布 ， 正 由 于 此 ， 我们 也 
把 它 叫 作 巴 斯 加 〈Pascal) 分 布 ， 当 r==1 时 ， 它 化 为 几何 分 布 (pÉ). 

例 (〈a) 巴 拿 赫 火柴 盒 问 题 :， 某 一 数学 家 经 常 在 左边 口袋 放 一 僵 火 某 ， 右 边 口 袋 
也 放 一 盒 火柴 ， 当 他 要 用 火柴 的 时 候 ， 他 随机 地 从 一 个 口袋 中 去 取 火 柴 ， 因 此 连续 的 
抽取 构成 了 一 串 p= 1/2 的 伯 努 利 试验 ， 假 定 最 初 每 盒 火柴 恰巧 包含 NR, 我们 考虑 ， 
数学 家 第 一 次 发 现 空 盒子 的 时 刻 ， 在 那 一 时 刻 ， 男 一 盒 火 柴 可 能 还 有 0,1,…,NN 根 火 


1. 此 例 源 于 斯 坦 因 豪 斯 (H. Steinhaus) 在 关于 巴 拿 赫 的 一 次 演说 中 ， 提 到 巴 拿 赫 抽烟 爱好 的 趣事 ， 此 趣 
事 意 想不到 的 广 为 转载 于 诸 文献 ， 故 此 采用 此 名 ， 不 予 变 改 . 
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K, 我们 用 w 表示 其 对 应 的 概率 ， 我 们 令 从 左边 口袋 选取 火柴 为 “成 功 ” “HR 
MAWORMKRBSN AWN KARE Pia r AAR” AFH FS 
件 发 生 时 才 发 生 : RA Nr RRR EE NTI 次 成 功 之 前 .这 个 事件 的 概率 为 
fON—-r;N+1,1/2). 同样 的 推理 可 以 用 之 于 右边 口袋 因此， 所 要 求 的 概率 为 


1 ZN —T\, on, 
u = 2f(N—nN+lig)= (OX "oe, (8. 5) 
# 6-8 AET N=50 tt u, 的 数值 [参见 6.10 节 习 题 21 一 23 和 9. 9 PA ll]. 


表 6-8 KARAM PRR (8.5) 


r Uy U, r ul, U, 
0 0.079 589 0.079 589 15 0.023 171 0.917 941 
l 0. 079 589 0. 159 178 16 0. 019 0&1 0. 937 022 
2 0. 078 785 0. 237 963 17 0.015 447 0. 952 469 
3 0.077 177 0.315 140 18 0. 012 283 0. 964 752 
4 0. 074 790 0. 389 931 19 0. 009 587 0. 974 338 
5 0.071 674 0. 461 605 20 0. 007 338 0. 981 676 
6 0. 067 902 0. 529 506 21 0. 005 504 0. 987 180 
7 0. 063 568 0.593 073 22 0. 004 041 0.991 220 
8 0.058 783 0. 651 859 23 0. 002 901 0. 944 121 
9 0.053 671 0. 705 527 24 0. 002 034 0. 996 155 
10 0. 048 363 0. 753 890 20 0. 001 392 0. 997 547 
11 0. 042 989 0. 796 879 26 0. 000 928 0. 998 475 
12 0. 037 676 0. 834 595 27 0.000 602 0.999 077 
13 0. 032 538 0. 867 094 28 0. 000 379 0. 999 456 
14 0.027 676 0. 894 770 29 0. 000 232 0. 999 688 


假定 开始 时 ， 每 盒 火柴 有 50 根 ，uw 是 发 现 第 一 合 空 时 第 二 盒 恰 有 7 根 火柴 的 概率 ，U, =u tart 
u 是 对 应 第 二 盒 不 多 于 r 根 火柴 的 概率 . 


(b) 推广 乒乓 球 ， 如 果 把 取 中 两 盒 火柴 的 不 同 盒 赋 以 不 同 的 概率 ， 那 么 上 面 的 
例子 的 情况 会 更 清楚 . 为 了 富有 变化 ， 在 此 用 很 不 同 的 方式 来 描述 ， 假 定 彼得 和 保 
罗 二 人 玩 一 个 游戏 ， 这 可 用 伯 努 利 试验 序列 来 刻画 ， 其 中 的 概率 之 和 9 是 反映 他 们 
的 技术 的 两 个 参数 .在 通常 的 乒乓 球 比 赛 中 ， 谁 首先 累积 赢得 21 个 球 谁 就 获胜 ， 为 
了 与 前 一 个 例子 进行 比较 . 我们 考虑 一 般 情 形 ， 要 求 先 累积 赢得 2v 十 1 TERA HERR 
胜 ， 这 场 比赛 至 少 要 进行 2v 十 1 次 ， 至 多 进行 4v 十 1 次 . 令 彼 得 在 第 4v 十 1 一 r 次 获 
胜 的 概率 为 a,， 此 事件 发 生 当 上 且 仅 当前 4v 一 r 次 中 彼得 赢 2v 个 球 而 此 后 的 一 个 球 又 
是 彼得 赢 了 .因此 


a, 一 


Cy een s.o 


128 第 6 章 二 项 分 布 与 光 松 分 布 


在 此 游戏 中 ， 彼 得 获胜 的 概率 为 a 十 … 十 az。. 《 原 书 此 处 把 v 误 写成 N， 特 此 更 正 .) 


如 果 取 2u=N,p=—q=1/2, WR a, tb, 就 是 前 例 中 的 > 
6.9 多 项 分 布 


二 项 分 布 很 容易 推广 到 一 般 的 情形 ， 即 每 次 试验 有 寿 干 个 可 能 结果 的 n 次 重复 
独立 试验 ， 设 EE ，…,E, 是 每 次 试验 的 可 能 结果 ， 且 每 次 试验 中 E; 发生 的 概率 是 
pi(i 二 1,2,…,r). 当 r= 二 2 时 ， 它 化 为 伯 努 利 试验 序列 ， 在 一 般 情 形 ，p; 应 满足 以 下 
的 条 件 

pi 十 加 十 … 十 加 一 1] pi 之 0. (9. 1) 
n 次 试验 的 可 能 结果 可 表 为 形 如 天 ,FE … 的 了 元 序列 .并且 在 于 次 试验 中 五 ; HME, 
kx, E BH k £, oo, E, 出 现 k, 次 的 概率 是 


n! 1 2 ] een r 
bik tek? pr peepi, (9, 2) 
RP ki 是 任何 非 负 的 整数 并 且 满 足 
ki +h teeth, =n. (9.3) 


当 r=2 Ay ， (9. 2) 就 化 为 二 项 分 布 ， 其 中 Pi = psp: 5 qki Sksk: Hn k. 从 第 2 章 
公式 (4.7) 出 发 ， 我 们 可 用 证 明 二 项 分 布 的 方法 来 证 明 这 个 一 般 情 形 的 公式 . 

因 公 式 (9.2) 是 (pi 十 … 十 p,)" 多 项 展开 式 中 的 一 般 项 ， 故 (9.2) 称 为 多 项 分 
布 ， 这 分 布 主 要 应 用 于 个 体 被 区 分 为 多 于 两 类 的 有 放 回 抽样 “例如 ， 按 照 职 业 进 行 
分 类 ). 

例 (AaB 12 个 明 子 ， 问 休 子 的 每 面 都 出 现 两 次 的 概率 是 多 少 ? 设 ,Es,… Es 


FoR AL EAN TB 由 于 外 一 2, 记 一 去, 一 1,2，…6， 所 以 我 们 的 答案 是 (121)(2) 一 


(6) £ =0. 00347». 

(b) 抽 样 ， 把 一 个 具有 N 个 元 素 的 总 体 分 为 7 个 子 类 EE ,…,E,， 子 类 的 大 小 分 别 
为 Npi，,…,Np,， 多 项 分 布 给 出 了 由 这 个 总 体 中 有 放 回 地 抽取 一 个 大 小 为 n 的 随机 样 
本 的 各 种 可 能 组 合 的 概率 ， 

(c) 多 重 伯 努 利 试验 ， 两 串 伯 努 利 试验 合 在 一 起 可 考虑 为 一 个 具有 四 个 可 能 绩 条 
(S,S),(S,F),CF,S) ,CE,F) 的 联合 试验 ， 其 中 poa 与 户 ,9 PHA BA Al 
试验 的 成 功 与 失败 概率 ， 如 果 这 两 串 试验 是 独立 的 ， 则 联合 试验 中 四 个 可 能 结 采 的 
概率 分 别 为 pi pz ,pi9: ,qi Peo. E hy kooks ki EWT., RHIA n, W) n Ek 
合 试验 中 SS 出 现 WK, SF 出 现 &; K, FSHA k, K, FF HA k, 次 的 概率 是 


1. ERRES 4v 十 1 一 r 次 试验 结束 的 概率 为 a; 十 5.， 此 处 6 是 由 《〈8. 6) RAMI Sq 的 位 置 交换 
后 所 得 之 数 . 一 一 译 者 注 


6.10 3 题 129 


o onl k, +k, k k, pk +k, „E t, 
ky thy lks tk! qi p? q? ° (9. 4) 


qh Hee & ET EARN — Pha. Pa a oS m Ap 和 
9， 成 品 是 否 被 检查 的 概率 分 别 为 p 和 9 ， 因 成 品 是 否 被 检查 与 它 的 质量 无 关 ， 所 以 
我 们 有 两 串 独 立 试验 [参看 第 6.10 节 习 题 25 与 26， 以 及 9. 9I 12]. 


Pe ND 


15. 


17. 


6.10 J 题 


设 性 别 的 分 布 都 是 等 可 能 的 ， 问 6 个 小 孩 的 家 庭 中 恰 有 3 男 3 女 的 概率 是 多 少 ? 

一 个 玩 桥牌 者 连续 3 次 没有 得 到 爱 司 ， 他 是 否 有 理由 埋怨 运气 不 好 ? 

随机 数字 序列 要 有 多 长 才能 使 得 序列 中 数字 7 出 现 的 概率 至 少 是 9/102 

设 在 玩 桥牌 中 每 次 桥牌 分 配 是 独立 的 ， 问 需 玩 多 少 次 才能 使 得 一 个 事先 指定 的 玩 牌 者 至 
少 有 一 次 得 4 张 爱 司 的 概率 大 于 或 等 于 1/2? 如 果 “ 将 事先 指定 的 玩 牌 者 ” 换 为 “有 一 个 
玩 牌 者 ”， 则 结论 又 如 何 ? 

设 中 靶 的 概率 是 1/5， 问 10 次 独立 的 打靶 中 至 少 有 两 次 中 靶 的 概率 是 多 少 ? 

在 上 题 中 ， 如 果 已 知 至 少 有 一 次 中 靶 ， 问 至 少 两 次 中 靶 的 条 件 概率 是 多 少 ? 

一 组 任意 选取 的 13 张 桥牌 中 ， 恰 有 两 张 红 牌 的 概率 是 多 少 ?” 并 将 这 概率 与 成 功 概率 为 
bp 一 172 的 伯 努 利 试 验 中 的 相应 概率 相 比较 (关于 桥牌 的 描述 ， 可 参看 第 1 划 的 脚注 ). 

6 个 人 的 生日 都 在 12 个 月 中 的 任意 两 个 月 份 ， 而 在 其 他 的 10 个 月 份 肉 没有 这 6 个 人 的 生日 的 
概率 是 多 少 ? (假设 每 个 人 的 生日 是 彼此 独立 的 ， 并 设 生 日 发 生 在 某 个 月 份 是 等 可 能 的 , ) 

6 SEE. 求 下 列 问题 概率 : (ay 至 少 有 一 个 么 点 出 现 ; (D RATAA; Co) 
恰 有 两 个 么 点 出 现 ， 并 与 相应 的 泊 松 近似 值 相 比较 ， 


， 如 果 左 撤 子 的 平均 百分数 是 1% ， 试 计算 200 人 中 至 少 有 4 个 为 左 撤 子 的 概率 . 
， 设 一 本 500 页 的 书 中 含有 500 个 错 处 ， 试 计算 一 页 中 至 少 有 3 个 错 处 的 概率 . 
， 如 果 总 体 中 色 育 者 的 百分数 是 1%，、 问 有 放 回 的 随机 样本 应 该 多 大 才能 使 样本 中 有 一 个 色 


盲 者 的 概率 大 于 或 等 于 0. 95? 

在 上 题 中 ， 如 果 样本 的 大 小 是 100， 求 以 下 的 概率 : (a) 样本 中 没有 色盲 者 ;(b) 样本 中 
至 少 有 两 个 色盲 者 

如 果 想 让 蛋糕 中 至 少 含有 一 粒 葡萄 干 的 概率 大 于 或 等 于 0. 99， 试 计算 蛋糕 中 葡萄 干 的 平 
均 数 ， 

扑克 游戏 中 出 现 最 大 同 花 的 概率 是 2 一 二 0715， 问 ”要 多 大 才能 使 ”次 扑克 游戏 中 没有 
最 大 同 花 出 现 的 概率 小 于 1/e sz1/3 GÈ; 不 用 计算 便 可 得 出 答案 ) 


， 一 本 书包 含 n 页 ， 每 一 页 的 印 错 处 平均 为 * 计算 至 少 有 一 页 其 中 印 错 之 处 超过 的 


概率 . 

假定 有 两 类 颗粒 (例如 点 心中 的 不 同类 的 葡萄 干 ， 质 料 中 的 不 同类 的 杂质 )， 在 一 抉 给 定 
的 体积 中 ， 第 一 类 的 颗粒 怡 有 j 个 的 概率 为 p(j;a)， 第 二 类 的 颗粒 恰 有 个 的 概率 为 
(&;b)， 而 且 假 定 这 两 个 事件 是 相互 独立 的 证 明 这 个 给 定 的 体积 中 总 共 包 含 4 个 颗粒 的 
概率 为 pina tb) (把 这 一 论断 和 假设 加 以 抽象 化 ). 
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18. 


19. 
20. 


21. 


22. 


23. 


24. 


25. 


26. 


27. 


28. 


交通 问题 .十字路 口 的 交通 的 畅通 程度 ， 是 用 任意 给 定 的 一 秘 钟 内 有 一 部 车 子 通 过 的 概 
率 户 来 描述 的 ， 而 且 在 不 同 秒 的 时 刻 ， 车 子 的 经 过 是 互 不 影响 的 ， 把 秒 作 为 不 可 分 的 时 
间 单 位 ， 于 是 伯 努 利 试验 模型 在 此 可 以 应 用 ， 假 定 一 个 步行 者 只 能 在 后 三 秒 钟 没 有 车 子 
通过 的 情形 下 才能 跨 过 街道 ， 求 出 一 个 步行 者 恰巧 等 等 & 二 0,1,2,3,4 秒 的 概率 ，( 其 一 
般 的 公式 并 不 很 显然 ， 在 第 13.7 节 讨 论 成 功 的 连贯 理论 时 将 把 它 推出 来 . ) 

设 两 个 人 都 扔 ”次 硬币 . 求 硬 币 出 现 正 面 的 次 数 相等 的 概率 . 

在 一 个 成 功 概率 为 p 的 但 努 利 试验 序列 中 ， 求 a 个 成 功 出 现在 5 个 失败 以 前 的 概率 . CE: 
这 个 结果 至 多 在 4 十 6 一 1 次 试验 以 后 就 可 决定 ， 这 问题 在 博弈 的 古典 理论 中 起 着 作用 ， 
它 和 下 面 的 如 何 分 赌注 的 问题 有 关 : 当 一 方差 4 点 获 全 胜 ， 另 一 方差 点 获 全 胜 时 博弈 中 
Br, BOAR SP ACE. ) 

在 巴 拿 赫 火柴 盒 问 题 (第 8 节 ) 中 ， 求 出 : 一 盒 恰 用 完 〈 当 拿 火柴 时 发 现 它 是 空 的 ) 时 
另 一 盒 倘 恰 有 r (其 中 r= 二 1,2,…,NN) 根 火 柴 的 概率 . 

( 续 上 题 )， 应 用 上 面 的 结果 ， 求 出 首先 用 完 的 那 一 盒 不 是 最 初 拿 出 而 发 现 它 是 空 的 概率 


x， 并 证 明 由 此 所 得 之 表达 式 可 化 为 = (A )2-”*!， 或 者 近似 地 为 Nn). 


两 个 校对 者 独立 地 校对 某 一 本 书 的 印 样 ， 他 们 各 发 现 & 和 ak, 个 错误 ， 其 中 有 ke Pipi 
被 这 两 个 人 同时 发 现 ， 试 给 出 印 样 的 错误 的 个 数 n 的 一 个 合理 的 估计 . (假定 这 两 个 校对 
者 对 应 于 伯 努 利 试验 ， 他 们 发 现 一 个 错误 的 概率 分 别 为 pi 和 po. 可 应 用 大 数 定律 , ) 
注意 : 这 个 问题 是 用 简单 术语 来 描述 卢 瑟 福 (Rutherford 的 闪烁 计数 器 的 ， 

用 陷阱 来 估计 一 群 野兽 的 总 体 的 大 小 . “入 接连 设立 7 次 陷阱 ， 假 定 每 一 个 野兽 陷入 的 概率 
都 同样 为 9。 最 初 共有 2 个 野兽. 只 当 野 兽 被 捕 〈 拿 走 )》 时 ， 两 次 相继 设立 的 陷阱 的 情况 
A Beas. OR IE ~ 次 路 阱 所 捕获 的 野兽 分 别 为 nomon WAR. 

多 重 伯 努 利 试验 . 在 6.9 节 例 〈c) 中 ， 如 果 知 道 (S,F) 与 ES 中 有 一 个 发 生 ， 分 别 
求 (S,F),(F,S) 发 生 的 条 件 概 率 p 及 gq. VAS p >p WH, pol/2; 4 >p 时 ， 
p<l/2. 

( 续 上 题 )!。 ”如果 已 知 在 2 对 试验 中 (S,F) 与 (FS HRA mm, wH (S, P 恰巧 
BH RRA Be ORs ns p). 

二 项 分 布 与 泊 松 分 布 的 结合 ， 设 一 只 昆虫 生 > POMBE PGA), mI RER ARAM 
的 概率 是 pb 又 设 每 个 卵 是 否 发 育 为 成 虫 是 彼此 独立 的 . 证 明 有 个 后 代 的 概率 是 遵从 参 
BOK Ap 的 泊 松 分 布 . 

注意 : 同样 情况 下 的 另 一 个 例子 ;上 个 染色 体 分 裂 的 概率 为 p(k;A)， 一 个 分 多 的 染色 体 
恢复 原状 的 概率 为 p (类 似 的 一 些 其 他 的 例子 ， 请 参见 9. 1 PA Cd) 12.1.) 


证 明定 理 :， 多 项 分 布 (9. 2) 的 最 大 项 满足 不 等 式 


. 参见 (46). RAR (Wald) 利用 这 个 结果 设计 了 一 个 实用 的 方法 ， 用 于 比较 两 串 由 经 验 给 定 的 试 
验 〈 例 如 ， 两 架 机 器 的 产品 ) ， 而 选 出 成 功 概率 较 大 的 一 串 . 他 把 这 个 问题 简化 为 如 下 的 问题 ， 在 
一 串 伯 努 利 试验 里 求 成 功 频率 是 否 显著 地 不 同 于 1/2. 

. 在 第 一 版 中 ， 只 断言 | 已 一 ati| 委 ~ 此 处 的 改进 和 精练 的 证 明 都 属于 莫 兰 〈P. A. P. Moran). 


— 


iN 


29. 


30. 


31. 


32. 


33. 


34, 


35. 


36. 


37. 


38. 


39. 


6.10 3 AA 131 


np:— <k S(ntr— ip i= 1,2, 97. (10. 1) 
(提示 : 首先 证 骨 ， 最 大 项 的 充分 必要 条 件 是 pk; Sp kiti) OAEI). Fee 
不 等 式 对 全 部 的 7 加 起 来 ， 同 时 也 对 全 部 ;天 7 加 起 来 , ) 
当 上 是 不 超过 4 WRK BRAN, TAR PHI p (ks AD 达到 最 大 值 . 
注意 : 问题 30 一 34 是 关于 二 项 分 布 的 沼 松 过 近 的 . 把 np ELAI, m 定义 为 不 超过 (nn 十 
1) 的 最 大 整数 (也 就 是 说 ，m 是 二 项 分 布 的 中 心 项 的 指标 ). 
证 明 当 从 0 BABOON, a=b kin, p)/ PCRs DRM LIME FRE. MEE k= m 时 达到 
它 的 最 大 值 . 
W kK, blkin p ERE 2 小 而 后 变 大 最 后 又 变 得 比 pasa). 
如 果 n -> co， 户 一 0 使 得 zzp 一 1 保持 为 常数 ， 则 

blk;n,p) -> pled) 

对 全 部 一致 地 成 并 


WEAR : 
He A ek Ae oO k $ OÀ rok 
0-4) > blkinsp) >A 0i) +) (10. 2) 
应 用 第 2 章 不 等 式 12.26). M (10.2) 推出 
Dki ADE” D> bikin p) > pk; e É OPH rd, (10. 3) 


sa. BOR (10.2) JERR. 0.3) 却 给 出 较 精确 的 误差 估计 ， 用 类 似 于 第 2 章 第 
9 节 的 计算 方法 可 以 很 容易 地 改进 (10. 3)， 附 带 提 一 下 ; 应 用 习题 30 的 结果 ， 容 易 看 出 
(10.3) 左边 的 指数 可 以 用 a/n RARE, WATS Fp tna 


其 他 的 极限 定理 
超 几 何 分 布 的 二 项 通 近 ， 一 个 包含 有 NN 个 元 素 的 总 体 分 为 红 黑 两 类 元 素 ， 其 比例 为 p :4 
(其 中 p 十 q 二 1)， 无 放 回 地 抽取 一 个 大 小 为 n WEA. EPIRA PCRS R 
2.6 节 的 超 几 和 何 分 布 所 给 出 . 证 明 : 当 N 一 ce 时 这 个 概率 趋 于 bkin p). 
在 前 面 一 个 问题 中 ， 今 pW, ?很 大 ， 而 ) 一 ib 大 小 适当 ， 于 是 超 几 何 分 布 可 以 用 泊 松 
分 布 p(&;j 来 逼近 .不 用 二 项 逼近 来 直接 验证 这 个 关系 . 
在 6.8 HA DATA far. Dp}, A qo 和 一 co 使 rg 一 保持 常数 证明， 

flk;r,p) > plesa). 
多 重 泊 松 分 布 ， 注 意 : 这 道 题 为 波 利 亚 分 布 提供 了 一 个 极限 理论 ， 参 见 5. 8 习题 24， 当 7 
很 大 而 np; =A; 大 小 适当 时 ， 此 处 7 一 1,…,r 一 1， 多 项 分 布 “9.2) 可 以 用 


k k 
Larreta) AL L AR" tÀ m 
e “1 王 1 ”一 一 一 一 一 -一 一 一 一 

ki lk eke ! 


来 通 近 ， 并 证 明 这 些 项 之 和 为 1, GER: 问题 17 和 二 重油 松 分 布 有 联系 . ) 


(a) 应 用 显然 的 关系 
blk;n, p =bn kin, q), 
从 (3.5) 直接 推出 (3. 6). 
(bO 用 归纳 法 和 从 第 4 章 (3.1) 的 一 般 的 求 和 公式 推出 二 项 分 布 . 
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40. EBH DAOC Rin. p)=np MUR Elkin, =n’ p +npd. 
41. WEAR DR pk a= +A. 
42. 验证 等 式 


Å 
SoCvsnm » p)O(k— vim, p) =blkim +m, p), (10. 4) 


并 解释 这 等 式 的 概率 音义， 提示 利用 第 2 章 的 公式 (6.4). 
注意 ， 等 式 (10.4) 是 卷 积 的 特殊 情形 ， 这 在 第 11 章 将 提 到 ， 而 另 一 个 特例 是 (10. 5). 
43， 验 证 等 式 


S plosa) P — vide) = plk;Ai +A). (10. 5) 
44. i3 ~ 
BC k;n, p) = Socusnep) (10. 6) 
是 ,次 试验 中 至 多 有 上 个 成 功 的 概率 , 则 
Bikint+1.p) = Blk;n, p) — phan, p), (10. 7) 


Bik+1jyn+1,p) = Beksn, p) +qb(k+13n,p). 
(a) 由 定义 出 发 证 明之 ;lb》 分 析 证 明之 . 
45. 证 明 : 
Blk;n, p) = a= (r) pema- ode (10. 8) 
与 
n—l 
k 


提示 ， 用 分 部 积分 法 或 将 等 式 的 两 边 对 pp 求 导数 . 这 两 个 结果 可 以 互相 推导 . 
46， 证 明 ， 


1— Bnp) = n( )| ea od (10. 9) 


plOsA) Fee + pn A) = 三 | erat de. (10. 10) 


n! 


L (10.9) 中 的 积分 是 不 完全 的 贝塔 (Beta) BH. WEA 5n KO VR 50, 以 及 p=0.01,0. 02, 
0.03,… ,1 一 BG;n, 力 ) 的 七 位 小 数 表 是 由 下 面 的 书 : “K. Pearson, Table of incomplete beta func- 
tion ;London(Biometrika Office) ,1934” 给 出 ， 
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二 项 分 布 的 正 态 逼近 在 理论 上 和 实用 上 都 值得 关注 . 由 于 它 导 出 了 第 一 个 极限 
定理 ， 它 在 概率 论 的 发 展 中 扮演 了 重要 角色 .， 从 现代 观点 看 ， 它 仅仅 是 中 心 极限 定 
理 的 一 个 特殊 情形 ， 对 中 心 极 限定 理 ， 在 第 10 章 中 我 们 还 要 讨论 ， 但 全 面 的 详细 的 
研究 ， 要 放 在 第 二 卷 书 . 

p= 1/2 的 特殊 情形 我 们 曾经 在 第 3 草 中 应 用 它 得 出 “ 初 过 ”和 “ 竺 号 变化 数 ” 
等 的 极限 定理 .这 种 情形 十 分 简单 ， 我 们 将 在 7. 2 节 单 独处 理 它 . 


7.1 正 态 分 布 


为 了 以 后 的 方便 ， 我 们 在 这 里 先 引进 两 个 重要 的 盟 数 . 


定义 (HK 
l -22 
nr) = e 2° (1.1) 
VON 
称 为 正 态 密度 函数 ， 它 的 积分 
l {7 人 
Nr) = | ot dy (1. 2) 
J one 一 


就 叫 作 正 态 分 布 函 数 ， 

nz) 的 图 形 是 对 称 的 钟 形 曲线 〈 如 图 7-1 所 示 )， 但 须 注 意 ， 图 中 两 个 坐标 轴 所 
取 的 单位 是 不 同 的 .nm(Cz) 的 最 大 值 为 1/ V2x 守 0. 399， 所 以 ,在 通常 的 〈 同 单位 的 ) 
笛 卡 儿 坐 标 里 y= 二 n(xz) 的 图 形 比 画 出 来 的 要 扁平 得 多 [符号 n 和 对 不 是 标准 的 ， 在 
前 两 版 本 中 ， 我们 用 #$ 和 和， 但 是 为 了 与 第 二 卷 书 的 一 些 要 求 符 合 ， 第 三 版 中 用 n 和 
RARE SAD. | 

引 理 1 n (x) 的 图 形 与 x 轴 所 围 成 的 区 域 的 面积 为 1]， 即 是 


| n(x)dx = 1. (1.3) 
证 显然 
0 2 oo Pioo 
(| n(x) dr =| | n(x)nCy)drdy 
— i mrs (a ty )/2 
e drdy. (1.4) 
On) _ wd co 
这 个 重 积 分 可 用 极 坐 标 来 表达 : 
Xx 3 十 cc 9 2 Teo 
lf do| etr dr =| et’ rdr =— e?’ =], (1.9) 
2n o 0 0 0 
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至 此 ， 引 理 证 毕 . > 
n (x) 


-3 -2 -1-065 0 067 1 2 


HBR BI 507% | 
{< 面积 的 68.3% | 


E FA 95.6% 
面积 的 9%9.7 多 | 


A 7-1 正 态 密 度 函 数 


从 定义 及 引 理 可 推出 : (x) 由 0 单调 上 升 到 1， 它 的 图 形 是 一 个 S 形 的 曲线 (如 


R(— zx) = 1—RCx). (1. 6) 


N (x) 


里 
a r eee 


-] -2 41-0670 0671 2 3 
图 7-2 ERS fi KA 
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ge 7-1 234 xz BUEN Co) HRUE., MM 1.6) XEN (一 z). 
在 很 多 情况 下 ， 当 并 很 大 时 ， 对 “ 尾 量 ”1 一 人 (zx) 有 一 个 初等 的 估计 是 合宜 的 .下 
面 将 给 出 这 个 估计 . 

引 理 2 %4 r—> ony’ 


1—-RCxr) ~ r` n(x) (1.7) 

更 精确 些 说 ， 对 任意 ZXZ>0， 有 下 面 的 双重 不 等 式 
[rir inde) K 1— Rr) < r> nlr) (1. 8) 

成 立 〈 人 参见 第 7 章 习 题 1). 
证 显然 ， 

[1 一 3z jnGz) < n(x) < [1+ r ncr). (1.9) 
m 1.9) 中 三 项 恰 是 《〈1.8) 相应 的 三 项 的 微 商 乘 以 负 1， 故 把 d.) 中 三 项 分 列 
从 工 到 ce 积分 即 得 双重 不 等 式 〈1. 8). > 


术语 注解 . 在 数学 文献 中 ， 术 语 分 布 函 数 就 是 指 这 样 的 非 降 纯 数 已 (x): 4 > —oolt 
F (x) F0, WY a> OW F a) BF 1. 统计 学 家 常常 喜欢 把 此 函数 叫 作 “累积 分 布 函 
数 ” 这 一 术语 ， 其 实 “ 累 积 ” 这 一 形容 词 是 多 余 的 .所谓 密度 了 另 数 就 是 这 样 的 非 负 函数 ， 其 
在 整个 x 轴 上 的 积分 为 1， 任 何 密 度 消 数 从 一 2 到 z 的 积分 是 一 个 分 布 孙 数 . IR “SE 
数 ” 是 密度 函数 的 同义词 . 

正 态 分 布 函数 常常 也 叫 作 “高 斯 分 布 ” (Gaussian distribution). 但是， 在 高 斯 之 前 ， 棣 
莫 弗 和 拉 普 拉 斯 就 在 概率 论 中 用 过 这 个 函数 .如 果 改 变 坐 标 原点 与 度量 单位 ， 则 可 使 办 (zz) 变 
YN (2—a)/b), BRRUERAB EB a 及 方差 6* (或 标准 差 | 5 | ) BESS HR. KA 
2N (2V2) 一 1 常常 叫 作 误差 函数 . 


表 7-1 正 态 分 布 函数 值 


» 9399 
9753 
6141 
6917 
6879 


ooooD 
ooo oD 


7224 
7949 
7852 
. 8133 
8380 


ooooe 
oof fo2 


—_ 
> 


8621 


1. 至 于 更 大 的 表 ， 则 请 参看 [47]， 在 那个 表 里 当 x 从 0 变 到 1 时 每 隔 0.0001 取 一 个 分 点 ， 当 >l 时 
则 每 隔 0. 001 取 一 个 分 点 ， 在 这 些 分 点 上 给 出 办 (x) BRC SR ( 一 xz) 的 值 直到 15 位 小 数 . 
2. 此 处 及 以 后 符号 “一 ” 皆 表 示 两 边 之 比 趋 于 L. 
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(BE) 

a poo [oe poe [oo] Oe [oe Or | oe lO 
l. li 0. 0. 8830 
l. 2 0. 9015 
1.3 0. 9177 
l. 4 0. 9319 
1.5 0. 9441 
1.6 0.9545 
1.7 0. 9633 
1.8 0. 9706 
1.9 0. 9767 
2.0 0. 9817 
2.1 0. 9857 
2.2 0. 9890 
2.3 0. 9916 
2 4 0. 9936 
9.5 0. 9952 
2.6 0, 9964 
2 7 0. 9974 
2.8 0. 9981 
2.9 0. 9986 
20 0. 9990 
al 0. 9993 
2 0. 9995 


对 于 z<<0， 应 用 关系 N—2)=1- Nz) 


7.2 预备 知识 : 对 称 分 布 


下 面 说 明正 态 分 布 作为 具有 p= 1/2 的 二 项 分 布 的 允 近 的 用 处 . 

有 两 方面 的 理由 说 明 为 何 要 处 理 p= 二 1/2 这 一 特殊 情形 ， 第 一 ， 由 于 计算 非常 简 
单 ， 从 而 为 我 们 引信 正 态 分 布 解决 问题 提供 一 种 好 的 思路 ， 第 二 ， 这 个 特殊 情况 ， 
曾 在 与 随机 徘徊 的 联系 使 用 过 (参见 第 3. 2 节 )， 并 且 值 得 提供 一 个 证 明 ， 该 证 明 不 
会 被 非 对 称 分 布 的 技术 难点 所 迷惑 . 

为 确定 起 见 ， 取 n 二 2v 为 偶数 ， 为 简单 起 见 ， 令 


a, = b(v+t hs2v, 5 ) (2.1) 


HE, a 是 对 称 二 项 分 布 中 如 脚 标 数 所 表明 的 项 离 中心 项 之 距离 ，a 是 中 心 项 , k 
的 取 值 从 一 v 到 wv， 因为 a; 一 a:， 所 以 我 们 只 考虑 过 0. 
(用 第 3 章 的 记号 a 二 pyr， 下 面 的 证 明 不 依赖 第 3.2 节 以 后 的 概念 ， 可 在 此 插入 . ) 
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为 了 获得 有 关 序 列 do 9) 9A ，"… 的 性 质 的 局 示 ’ 用 下 述 关 系 比较 其 一 般 项 与 do» 


a, = a, + vlu — lu Rk +1) 
"(vb Dot? elot k) | 
此 关系 可 由 a 的 定义 直接 得 到 . 

我 们 只 对 大 的 ， 感 兴趣 ， 而 且 下 面 我 们 只 需 考 虑 使 k/v 很 小 的 那些 &， 因 为 其 他 
的 使 a WUBI. FET MERRY A. WO (2.2) 右边 的 分 数 中 单个 因子 


都 取 1 十 1/v 的 形式 ， 而 7 的 取 值 从 一 (&R 一 1) 跑 到 2. AA 


1HE Ss get, (2.3) 


(2.2) 


其 中 省 略 号 表示 这 样 一 些 项 ， 其 和 小 于 ( 工 ) ， 在 这 个 通 近 过 程 中 ，(2. 2) ASH 
数 近似 地 为 一 个 指数 函数 ， 其 指数 为 


~ 24 +@—p1-* =É, 
tis FH 4} 5H 8 eR IR / et. Ath, 4 二 co 而 ORK, 满足 
K3/v—-0 (2. 4) 
时 ， ABUA: 
a, ~ aye E, (2.5) 
当 二 项 式 系数 表示 为 一 些 因子 时 ， 由 第 2 章 (9.1) 的 斯 特 林 ”公式 有 
DUN 1 
a = Qty ~ . (2. 6) 
| Uv VTU 
代入 (2.5) 得 : 
a,~hnkh), MAb h= /2/v=2//n (2.7) 


此 基本 关系 对 “vw 一 o, RC Kv HAR (2.4)” RÈ. 


我 们 主要 对 阶 为 Vv 的 & 应 用 (2.7)， 而 这 种 显然 满足 (2. 4). 
实际 中 ， 我 们 要 求 各 类 区 间 所 具有 的 概率 的 逼近 式 ， 即 是 下 面 形 式 的 部 分 和 ; 


1. 关于 斯 特 林 公式 中 的 常数 ， 回 顾 第 2. 9 节 ， 我 们 并 未 证 明 斯 特 林 公式 中 的 常数 是 V2x， 现 填补 此 漏 
洞 如 下 : 代 “2.6〉 中 之 以 未 知 常数 c， 这 不 影响 允 近 定理 ， 除 了 把 “2. 10) 右 方 乘 以 “< 以外， 我 
们 必须 证 明 c=1， 我 们 用 具有 zi 二 0 的 修正 形式 ， 当 nn 一 oo 时 两 边 之 比 趋 于 1， 但 是 第 6 童 (3. 5) 


的 尾 估计 证 明 。 左 边 介 于 方 与 方 一 4z7?， 至 于 右边 ， 由 《1.8) 有 双重 不 等 式 ， 


c> cl Rz) 一 =] = +e clL1— R22) | > em cnx.) / zo. 


当 zz 充分 大 后 ， 两 边 分 别 可 任意 接近 于 和 玉 c， 故 一 1， 证明 完 毕 . 


2. 回 到 S, ， 出 于 此 字母 在 第 3 章 和 第 6 章 有 不 同 的 食 义 ， 用 随机 徘徊 的 术语 ，A(zi ,zx2) 是 在 时 期 "一 
2v 时， 质点 处 于 2x1 和 2x2 之 间 的 概率 ， 而 用 现在 的 术语 ，A(xi,z2) 是 nn 二 2v 时 试验 的 成 功 次 数 
界 于 V 十 xi 与 V 十 x 之 间 的 概率 。 在 下 一 节 ， 此 数 再 一 次 用 S$， 表示 . 
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Altri) = >) a (2.8) 


x, Sm 


RMP 及 到 一 切 界 于 0 和 x (包含 ) 的 整数 ， 我 们 现在 要 说 明 : Az) (Ae) SACO, 
rer AO 的 图 之 下 的 面积 来 通 近 ， 而 m 又 可 用 积分 NKR. 由 于 hm 的 单调 性 ， 
在 1 ØWRE PAF RAMA DA 之 间 的 面积 小 于 hn(kh), 但 又 大 于 mEDAR). 
由 此 排出 

[nod D Amc) <)| nods (2. 9) 


x 
T SRST, Ti 


由 (2.9) 可知， 其 中 间 那 一 项 就 是 A(xi sn) eA, M4vKA k/o EP, 
即 当 小 而 zh PA, WIR. (2.9) 左 、 右 两 端 分 别 等 于 (xih 十 h) 一 
N(x ANC mhI-RNCxrnh—-h), EMAC A > 0 而 趋 于 0， 所 以 可 用 (zsh) 一 
(xh) 来 代 蔡 它们 . 
我 们 把 这 个 结果 表述 为 一 个 极限 定理 ， 但 是 变量 z 代 之 以 z 王 Arz. 
BEEE JABEZ <z, BA 
>) ar> Re) — Re). (2.10) 


EAEE ERT 
我 们 不 久 将 发 现 : 此 结果 可 以 推广 到 对 x 和 z AB mn — ie Heim A A BR h HY Te 
注意 第 3 音 定 理 中 的 《〈2.7) 式 是 含 于 (2.10) W, m (2.10) 又 是 下 一 节 的 更 一 般 
的 定理 的 一 个 特例 . 
误差 界 ”因为 (2.9) 包含 7 了 上、 下 界 ， 所 以 我 们 不 必 关 注 由 积分 代替 求 和 所 带 来 的 
误差 . 
H TIER (2.7) RÆ., $ 


a, = aget ‘vel = hnlkh)E (2.11) 
habe: 代表 由 略 去 2.3) 中 的 高 阶 项 所 带 来 的 误差 ， 而 es XA (2.6). 
由 上 说 明 ， 易 见 : 
_ /ltji/v 2i k\ k 
a = 2 (lg 47, 1) 4 (1og(1+ ~~) =). (2. 12) 


对 相对 小 的 ”的 误差 估计 ， 我 们 最 感 兴趣 ， 而 阐述 这 种 和 情形， 我 们 假定 A<1/3w 把 第 2 ME 
st (8.11) 与 具有 公 比 1/3 的 几何 级 数 比 较 ， BR (2.12) 中 的 一 般 项 是 正 的 而 且 小 于 
Cj/v)，， 从 而 整个 级 数 是 正 的 而 且 小 于 如/ (40). BB 2 章 〈8. 9)， 类 似 地 可 知 : 最 后 一 项 
是 负 的 而 且 大 于 一 3 姑 / 40). H 
-3E ca < (4k<4). (2. 13) 

在 许多 应 用 中 ,，& ANNO KDBAS, IA k<n/6 显然 是 满足 的 .在 这 种 场合 下 ，(2. 13) 
条 件 是 很 强 的 . 

如 同 (2.6) 一 样 ， 用 第 2B (9.15) 的 改善 了 的 斯 特 林 公式 可 以 得 到 a 的 一 个 更 好 的 
站 近 ， 只 要 把 右 方 乘 以 @ ”就行 ， 此 外 .在 任何 情况 下 ， 恒 有 : 


ll cen ct 


-+ 一 一 -一 2.14 
dn 20n° ån 3607" ( ) 
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至 此 ， 我 们 得 到 了 逼近 起 (2.7) Æ (2.10) 的 误差 限 的 精确 估计 ， 这 些 估计 其 至 对 相对 小 的 
n 都 是 可 用 的 ， 

上 述 研究 的 主要 结果 是 : (2.7) 中 的 百 分 误 差 是 P/E KR / 阶 大 小 的 ， 有 时 此 误差 也 
大 了 点 ， 但 在 实践 中 ， 这 种 估计 常常 用 于 站 /2 很 大 的 场合 ， 在 这 类 场合 ， 其 相对 误差 的 阶 古 
ki 1/ 上述 估计 法 也 指明 了 如 何 用 增加 相关 的 项 数 来 改善 逼近 式 《参看 本 章 习 题 14). 
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下 面 我 们 将 要 把 上 一 节 的 逼近 ， 推 广 到 具有 41/2 的 一 般 的 二 项 分 布 中 去 . 过 
程 是 类 似 的 ， 但 计算 颇 复 杂 ， 第 一 个 复杂 问题 就 是 关于 分 布 的 中 心 项 ， 正 如 我 们 在 
第 6 章 (3. 2) 中 所 看 到 的 ， 中 心 项 的 下 标 是 满足 下 述 条 件 的 惟一 的 整数 m: 

m 二 np 十 8, 其 中 一 g 二 6 过 2. (3. 1) 
BRE 8 最终 可 忽略 ， 但 在 计算 中 却 不 可 回避 . (在 p=1/2 的 场合 ， 这 麻烦 由 假设 
n= Lute [a A iM ee t T.) 
如 前 节 ， 把 二 项 分 布 的 项 重新 编号 ， 并 与 为 


a, = b(m+kins p) = ( aa (3. 2) 


n 
m-+k 
为 确定 起 见 ， 考 虑 有 >>0， 但 类 似 的 推理 可 用 于 R<0. OF &<0 这 一 区 域 ， 只 需 将 p 
与 gq 异 位 即 可 . ) 类 似 《2.2)， 有 


(7 一 1 一 到 一 1) nm—m— k+) p (3. 3) 
(m+1)(m+ 2) (m+ k)g l 


QA, — dy 


此 式 可 重 写成 下 述 形式 
QO = pt) pede — pie) 


Ah Ao dH d+) edgen) (3. 4) 
此 处 用 了 下 述 简单 符号 : 
_ jrorg (3.5) 


t. = 

1! (n-+ 1) pq © 
下 面 我 们 仅 对 使 六 很 小 ， 比 如 说 有 <<172 HR 3.4 式 . 由 第 2 章 〈8.9) 关于 
对 数 的 泰勒 展 式 易 见 : 


re =e" (3. 6) 
IWARRS AOE AOE BUD OG. EE 
a, = A Pi aaan = e (3, 7) 


Abe We BS RE ERE WO BUD ki kS apo. Bae: 
Sk RW HOHA) 


to tty Hee- thy =- GF DA à ` (3.8) 


1. 对 误差 项 的 非常 粗略 的 界 ， 我 们 用 足够 了 . 
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为 了 简单 起 抑 ， 我 们 用 站/ (2npq) 代 蔡 右边 ， 从 而 产生 一 个 小 于 2k/ (npq) 的 误差 . 
如 有 果 记 


a, = a Ek / ona +a, , (3. 9) 
则 误差 项 o 满足 下 述 不 等 式 : 
k’ 2k 
| Pe < (npa)? Tapa (3. 10) 
其 次 ， 我 们 要 证 明 : 
ay = —— pig — —L_., (3. 11) 
m!ln— m)! J 2anpq 


此 万 类 似 于 对 称 情况 (2.6) 式 的 推广 在 p= m/n 这 一 理想 情况 下 ，(3.11)〉 是 第 2 
& (9.1) 中 的 斯 特 林 公式 的 直接 推论 ， 直接 微 分 可 知 〈3. 11) 的 中 间 项 在 p=m/n 
达到 它 的 最 大 值 ， 对 于 给 定 的 2， 我 们 仅 考 虑 满足 (3, 1) AN» MA a 的 最 小 值 
在 两 个 端点 中 的 某 一 个 达到 ， 即 是 a 在 p=m/ (nt 1) p= Ont D/ (n+ 1) PE 
个 达到 最 小 值 ， 对 于 这 些 p 值 ， 再 一 次 直接 利用 斯 特 林 公式 ， 并 把 nn 代 之 以 nn 十 1 即 
可 得 (3. 11)， 这 就 证 明了 : (3.1) 对 所 有 的 p 值 都 成 立 ， 如 果 我 们 简 记 


1 
h -一 4 C3. 12) 
V np 
则 由 (3.9) AGE: 4k 5n 变化 满足 条 件 o: 一 0 时， 有 


至 此 ， 我 们 证 明了 : 
定理 1 当 n 一 co 且 上 满足 条 件 上 二 K,，K/rw 一 0 时 ， 则 (3.13) 对 尼 一 致 成 
立 ， 即 是 : 对 每 个 e 盖 0 和 充分 大 的 is 有 : 
Gp 
Ankh) 
例 ”图 7- 3 说明 n=10, p=1/5 的 情形 ， 这 时 npg=1.6. 当 半 很 小 时 通 近 都 是 惊 
人 的 好 ， 对 于 有 二 0,…,6， 概 率 blk;n, pH A O. 1074, 0. 2684, 0. 3020, 0. 2013, 
0. 0880,0. 0264,0. 0055, m (3.13) 得 到 的 相应 的 通 近 值 分 别 为 : 0. 0904, 0. 2307, 


1—e < <(_1l+e. (3. 14) 


0. 3154,0. 2807,0. 0904,0. 0189,0. 0021. > 
定理 1 EAA PRS PRE : 
f Bm 
Pla <S, < pi 一 SbCusns p) -一 > ak: (3. 15) 


在 定理 1 能 应 用 的 范围 内 ， 用 hm (hh) Ra, RIERA TAREE. 这 
个 量 可 以 解释 为 : 高 为 n AM 的 底 为 “中 心 在 RA BRA A 的 ”区 间 所 构成 的 沽 形 
的 面积 (参见 图 7- 3)， 按 常规 ， 我 们 代 和 矩形 之 面积 以 对 应 的 介 于 M n 的 图 形 之 


L 当 上 与 n AOE S/n? co 时 ， 正 态 逼近 将 代 之 以 另 一 种 形式 的 极限 定理 . (参见 本 章 习 二 13， 
15.) 
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ERER. AA: 当 疡 一 0 时 ， 此 两 种 面积 之 误差 在 极限 情况 下 是 可 以 忽略 的 . 4 a 
Al BARE BN, ABUT: 


Pla<$, <p} ~N((a—m+=)a)—R((B—m—FS)h). (3.16) 


0 1 2 3 4 5 6 


图 7-3 JARRE ASB. CPR br eee AA p= 1/5 的 10 次 但 努 利 试验 中 次 
成 功 的 概率 &&;10,1/5)， 而 那 条 连续 曲线 则 表示 对 于 每 个 整数 k PT YE Bw 


“ARK DMN A BESSA RE, BMA. AM, Ras 
式 的 右边 的 变量 最 好 代 之 以 之 ] 一 (am np) 六 和 z: = (PB—np) hs 由 此 而 产生 的 误差 
X h 0 时 趋 于 0， 因 此 我 们 得 到 了 下 面 的 基本 定理 . 
定理 2 ( 棣 莫 弗 - 拉 普 拉 斯 ) 对 固定 的 Ale, 4n> off, A: 
Pinb+z Vzbg S S, S np vnpgq}) > Nlz,) —RCz,). (3.17) 
此 定理 除了 其 理论 意义 外 ， 用 其 右边 来 作 左 边 之 逼近 在 实践 中 是 有 用 的 ， 由 
(3.10) 很 容易 得 出 其 良好 的 误差 估计 ， 但 我 们 在 此 不 许 加 讨论 了 .下 一 和 给 出 一 此 


实例 . 
如 果 把 S, 代 之 以 下 式 定 义 的 S*， 
_ S, — np 
S 一 一 一 一， (3.18) 
~v npg 


1. 显然 ， 由 定理 1， 此 处 的 条 件 还 可 减弱 ， 参 看 第 6 章 和 本 章 习 题 14 和 16. 
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则 关系 式 (3.17) 变 得 更 漂亮 了 .此 量 代 表 了 以 Vnpgq 为 单位 时 S, 与 np 之 偏差 . 如 
用 随机 变量 的 术语 来 说 〈 见 第 9 章 )， 称 np,npg TAA S, 的 期 望 与 方差 (平方根 
J npg AIRE). (3.17) 左 方 的 不 等 式 即 是 z 志 S$S* <e. 因此， 我 们 可 以 把 
(3.17) 重新 写 为 : 
Piz, < SF CZ) > Ne.) — NC ). (3. 19) 

在 多 数 场 合 ， 我 们 宁愿 用 这 种 形式 的 极 根 定 理 . 特别 地 ， 当 nn 很 大 时 ， 左 边 的 概率 
实质 上 不 依赖 于 p. 这 使 我 们 可 以 参考 标准 单位 去 比较 各 种 不 同 的 伯 努 利 试验 序列 的 
起 伏 . 

关于 任意 停止 的 附注 . 

必须 注意 : 我 们 的 极限 定理 和 通 近 定理 只 有 当 试 验 次 数 半 不 依 赖 试验 的 绪 果 而 事先 固定 
时 才 是 对 的 . 如 果 一 个 财 徒 有 权 在 对 他 有 利 的 时 刻 停止 赌博 ， 则 他 的 最 终 的 赢得 不 能 由 正 态 
逼近 来 判断 ， 因 为 这 时 赌博 的 持续 时 间 是 随机 的 ， 对 于 每 一 个 固定 的 ?来 说 ，9* 很 大 的 可 能 
性 很 小 ， 然 而 ， 在 一 个 长 的 连贯 中 ， 甚 全 不 太 可 能 的 事件 也 可 能 发 生 ， 而 且 我 们 将 要 看 到 : 
在 一 场 持续 的 赌博 中 ，S; 在 实际 上 确 有 一 序列 极 大 值 ， 其 阶 为 (2 log log n)3 (这 就 是 第 8. 5 
IAT RE WM). 


7.4 例 于 


(a) 令 p= ,n=200. BAK P{95 过 S, 之 105} ,这 是 把 一 个 硬币 扔 200 次 出 现 正 


面 的 次 数 与 100 之 偏差 不 超过 5 的 概率 ， 此 处 h==1/ vV 50 二 0.141421…， 它 相对 而 言 
大 了 一 些 ， 因 而 在 关于 区 间 的 极限 当中 要 注意 ， 应 用 (3. 16) APEA: 
P{95<S, 105} NG5, 5h) —N(—5. 5h) =2NCO. 7778-+-) — 1 =0. 56331. 

此 概率 的 真实 值 为 0. 56325…， 这 个 很 小 的 误差 在 很 大 程度 上 取决 于 分 布 的 对 
称 性 . 

(b) 令 p=1/10,n=500. IEAk h=1/v45=0. 14907. 仿 上 例 ， 有 
P{50<S, <55) NS. 5h) C—O—0. 5h) 一 中 (5. 5h) HRNO. 5h) 一 1 一 0. 3235… 它 相对 于 
正确 值 0. 3176… 而 言 ， 其 误差 大 约 是 2%. 

(c) S, 落 在 以 np 土 2 vapd 为 两 端点 的 区 间 的 概率 大 约 是 办 (2) 一 多 (一 2) 王 
0. 9545， 而 落 在 np 十 3 Vnpg 为 两 端点 的 区 间 的 概率 大 约 为 0.9973， 随 机 起 伏 落 在 如 
此 狭小 的 区 间 使 人 惊奇 ， 例 如 ， 扔 105 次 硬币 ,正面 出 现 的 次 数 与 均值 500 000 2% 
大 于 1000 的 概率 小 于 0. 0455. 

(dd) 令 n= 二 100,p 二 0.3， 表 7-2 用 一 个 典型 的 例子 (对 相对 小 的 n) 说 明 ， 当 区 间 
(QA BP, TEA RM AEH. 

(e) 让 我 们 找 一 个 数 a， 使 得 当 n 大 时 不 等 式 | S; | >a 的 概率 接近 1/2. 为 此 ， 
必须 保证 . 


7.4 i F 143 


N Ca) —R (—a) 一 二 


2 
BIE Na) =3/4. 由 正 态 分 布 表 知 : a=0. 6745， 因 此 下 面 两 个 不 等 式 有 相同 的 概率 : 
|S, — np |<0.6745 Vnpg 和 | S, — np |> 0.6745 Vnpg. (4.1) 


特别 地 ， 扔 UC BRT. TE TET HH SURE CIR TELL nE. 337 Vz 为 两 端点 的 区 间 的 概率 
近似 地 为 二 ,类 似 地 ， 掷 次 发 子 ， 么 点 出 现 的 次 数落 在 以 于 2 士 0. 251Vz 为 两 端点 
的 区 间 的 概率 也 近似 地 为 子 ， 


表 7-2 对 n= 二 100, p=0.3 的 二 项 分 布 与 正 态 逼近 的 比较 表 


成 功 次 数 概 率 IE. 4S 34 it 相对 误差 
9S, 511 0. 000 006 0. 000 03 + 400 
12<5,<14 0.000 15 0. 000 33 十 100 
15<S,<17 0.002 01 0. 002 83 + 40 
18<S,,<20 0.014 30 0.015 99 +12 
21<S8,23 0.059 07 0.058 95 0 
24<S,26 0. 148 87 0. 144 47 一 3 
27S, <29 0. 237 94 0. 234 05 一 2 
31<5,<33 0. 230 13 0. 234 05 +2 
34<S,<36 0. 140 86 0. 144 47 十 3 
37 生 S,<<39 0. 058 89 0. 058 95 0 
405,42 0.017 02 0.015 99 —6 
43<S,<45 0.003 43 0. 002 83 一 18 
46<S,<48 0. 000 49 0. 000 33 一 33 
49<S,551 0. 000 05 0. 000 03 — 40 


(1 一 个 竞争 问题 ， 这 是 说 明 公 式 (3.17) 的 实际 应 用 的 一 个 例子 .在 芝 加 凡 与 
洛杉矶 之 间 有 两 条 竞争 的 铁路 ， 它 们 的 火车 是 同时 开 出 同时 到 达 并 且 具 有 同样 的 设 
备 ， 假 定 ? 个 旅客 乘坐 娜 一 条 铁路 的 火车 的 选择 是 互相 独立 的 而 且 又 是 任意 的 ， 于 
是 每 列 火车 的 乘客 数目 可 视 为 以 概率 p= 1/2 的 nn 次 伯 努 利 试验 的 结果 .如 果 一 列 火 
车 设置 sn 个 座位 ， 那 么 ，. - 旦 有 多 于 * 个 旅客 要 来 乘 车 ， 就 容纳 不 下 了 ， 令 这 个 
事件 的 发 生 概率 为 A (5), Af (s) >>0， 应 用 渐 近 公式 〈3. 17) 就 有 

foxi a(S). (4. 2) 
如 果 很 大 ,使 f(s) 二 0.01， 那么 在 100 次 中 有 99 次 是 有 是 够 的 座位 的 ， 一般 说 来 ， 
从 司 可 以 任意 规定 一 个 风险 水 平 a 并 这 样 来 决定 s 使 f(s) <a. 为 此 ， 只 要 令 


s> -platt Vn), (4.3) 
其 中 是 方程 a 二 1 一 和 %(4,) 的 根 ， 可 在 表 中 查 得 . 例如 若 n=1000,4a=0.01, W t~ 
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2. 33， 而 s=537 个 座位 就 足够 了 ， 如 果 两 条 铁路 都 规定 风险 水 平 为 a 二 0.01， 则 两 列 
火车 所 有 的 座位 的 总 数 为 1074， 其 中 有 74 个 空 座位 ， 可 见 由 于 竞争 《或 者 随机 起 
伏 ) 而 带 来 的 损失 是 很 小 的 ， 用 同样 的 方法 可 算出 ， 奉 有 514 个 座位 则 在 80%% 的 情 
况 下 是 足够 的 ; MEA 549 个 座位 ， 则 在 999/1000 的 情况 下 是 足够 的 . 

类 似 的 考虑 可 以 应 用 到 其 他 的 有 竞争 的 供应 问题 上 去 ， 例 如 对 nn 位 顾客 有 mm 个 
电影 院 来 竞争 ， 于 是 每 个 电影 院 成 功 的 概率 是 p 二 1/m， 而 (4.3) 应 该 用 sm" 
ntt, Vn (m 一 1) | 来 代替 . 这 时 室 座 位 的 总 数 约 为 ms nL, Vn (m—1). M4 C 一 
0.01,n=1000,m=2,3,4,5 时 ， 空 座位 的 数目 大 约 分 别 是 74,105,126，147. HFS 
争 而 带 来 的 使 用 率 的 损失 是 非常 小 的 . 

(8) 随 机 数字 在 第 2. 3 节 例 (Cb) 中 ， 曾 经 考虑 具有 p=0. 3024 的 事件 ， 在 n= 
1200 次 试验 中 ,这 个 事件 的 平均 频率 为 0.3142， 它 与 p 的 离 差 为 e 二 0.0118， 在 
这 里 ， 


P| S:—p| >e)=P(IS,—npl>ne 


aP |S, —np|>0. 880 Vnpg}2(1— NCO. 88) ) 0. 379. 

这 意味 着 : 成 功 的 平均 数 与 p 之 偏差 大 于 e 大 约 占 总 情况 的 38%. 

(h) 抽 样 ， 在 一 群居 民 中 ， 吸 烟 的 人 的 比例 是 一 个 未 知 数 p， 想 用 有 放 回 抽样 来 
决定 p， 且 要 求 找 出 的 p 的 误差 不 超过 0.005， 样本 大 小 n 究竟 要 多 大 ? 

假定 样本 中 抽烟 的 比例 是 p. BPR, 无 论 样本 多 大 ， 总 不 能 绝对 保证 |p 一 p| 一 
0.005， 因 为 ， 由 随机 性 ， 样 本 中 人 人 都 吸烟 也 是 可 能 的 ， 我 们 所 能 做 的 最 好 的 是 : 
给 予 一 个 误差 超过 给 定 的 界限 0. 005 的 可 能 性 很 小 的 准则 ， 为 此 ， 我 们 取 一 个 “ 置 
信和 水平 ”a， 比 方 说 a 二 0. 95， 取 nn 如 此 之 大 ， 使 事件 |p —p|<0. 005 的 概率 大 于 等 
Fa HF np 为 n 次 试验 成 功 的 次 数 ， 所 以 

P{| p —p |<0.005} = P{| S,~ np |< 0. 0057n}, (4. 4) 
我 们 希望 找 出 的 n ESR, BURIELARRRAFS Fo. AR, KARE z 满 
EN (z) N Cz) =a MESE, n 需 如 此 之 大 以 满足 : 
0. 005 Vn 2 
Ja => z, EJ n = 40 000pgz, ， 

上 述 不 等 式 含有 未 知 概率 p， 但 是 无 论 在 何 种 情况 总 有 pas 1/4. MU, R&nSN 
10 000z 就 行 

对 于 置信 水 平 a 二 0. 95, 我 们 发 现 z= 二 1. 960， 因 而 ,样本 大 小 n 二 40 000 就 足够 
T. 这样 大 的 样本 是 浪费 了 一 点 , 但 是 |p' 一 p| 二 0. 005 也 要 求 太 苟 刻 了 ， 如 有 果 只 要 
求 |p' 一 p| 二 0.01， 那 么 样本 大 小 n=10 000 就 够 了 在 同样 的 置信 水 平 下 )， 对 所 请 
的 4 个 百分点 的 精确 度 ， 在 |p — p|<0.045 的 要 求 下 ， 样 本 大 小 为 475 MAT. MOP 
均 的 意义 上 看 ， 只 有 5% 的 随机 样本 ， 它 们 估计 的 结果 的 误差 大 于 事先 给 定 的 误差 
限 ，( 实 际 上 ， 困 难 通常 在 于 ; 获取 一 个 任意 大 小 的 但 有 代表 性 的 样本 . ) 
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7.5 SYA MBIT KA 


“npg ASA, IERIE). BAR. 4 n AT phit, Wace; 
?2, 力 ) 将 接近 于 A=np 的 泊 松 概率 请 (RiA)， 如 果 和 很 小 ， 那 就 只 能 用 泊 松 逼近 了 然 
而 当 4 较 大 时 ， 则 正 态 过 近 与 泊 松 台 近 都 可 以 应 用 . 由 此 可 知 ， 对 4 较 大 的 值 ， 就 可 
能 用 正 态 分 布 逼 近 泊 松 分 布 ， 且 在 第 10. 1 节 例 (ce〉 中 我 们 将 看 到 确实 如 此 (也 可 参 
见 本 章 习 题 9). 但 在 这 里 ， 我 们 只 用 一 个 数值 的 例子 和 一 个 实际 的 例子 来 说 明 这 
一 点 ， 

例 (a) BA A=100 的 泊 松 分 布 在 整数 集 a,a 十 1,… ,2 上 的 概率 为 

P(a,b) = p(a;100) + plat 1;100) + +++ + p(b;100). 
此 泊 松 分 布 可 以 作为 具有 n= 100 000 000 Al zt 三 10 一 的 二 项 分 布 的 通 近 ， 则 npg» 
100， 故 正 态 分 布 不 能 拿 来 逼近 此 二 项 分 布 ,， 但 至 少 在 中 心 项 100 的 逼近 尚 可 ， 但 是 
这 意味 着 Pla b)n H 
NC Cb—99.5)/ 10) —RCCa — 100. 5)/ 10) 

来 近似 ， 下 面 几 个 数字 给 出 逼近 程度 的 轮廓 . 


正确 的 值 正 态 通 近 
P(85,90) 0. 113 84 0. 110 49 
P(90,95) 0. 184 85 0. 179 50 
P(95,105) 0. 417 63 0. 417 68 
P(90,110) 0. 706 52 0. 706 28 
P(110,115) 0.107 38 0.110 49 
P(115,120) 0. 053 23 0. 053 35 


(b) 电 话 占线 问题 ， 下面 的 问题 是 从 实践 中 经 过 一 些 简 化 以 后 提出 来 的 .一 个 电 
话 交换 台 A 为 靠近 于 交换 台 B 的 2000 个 用 户 服务 ， 如 果 从 A 到 B 安 装 2000 条 线路 ， 
那 就 太 贵 太 浪 费 了 .我 们 只 要 安装 的 线路 的 数目 N 是 如 此 之 大 ， 使 得 在 通常 情形 下 ， 
100 次 呼唤 至 多 只 有 1 次 不 能 立刻 接 通 .假定 在 一 天 最 忙 的 时 间 里 每 个 用 户 打 到 B 区 
去 的 电话 在 一 小 时 内 平均 占线 两 分 钟 ， 不妨 把 最 忙碌 的 时 间 里 的 一 个 固定 时 刻 的 情 
况 比拟 为 p= 1/30 的 2000 次 试验 ， 其 中 p= 1/30 RAB ARR. A YT 
况 下 ， 这 些 试验 可 视 为 相互 独立 的 . 〈 这 并 不 总 是 正确 的 . 如 果 由 于 意外 的 大 十 或 地 
震 ， 很 多 人 都 要 叫 出 租 汽车 或 本 地 报馆 的 电话 ， 线 路 就 会 发 生 “ 拥 挤 ”， 那 时 ， 独 立 
性 的 理论 就 不 能 用 了 , ) 因而 就 得 到 了 具有 概率 p 二 1/30 的 2000 KABA Aw, OK 
满足 下 面 的 条 件 的 最 小 的 设置 线路 数目 N, 使 得 “成 功 ” 的 次 数 〈 即 占线 的 数目 )》 
超过 NN 的 概率 小 于 0. 01， 用 记号 表示 : P Sz 之 NN} <0. 01. 


1. 参见 [48]， 在 该 书 中 此 问题 是 用 泊 松 方法 来 处 理 的， 工程 师 总 是 喜欢 用 泊 松 方法 . 


146 第 7 章 二 项 分 布 的 正 态 逼近 


对 泊 松 盘 近 来 说 ， 取 A= 2000/3066. 67， 查 表 可 得 ， 成 功 次 数 大 于 等 于 87 的 
概率 约 为 0. 0097， 然 而 成 功 次 数 大 于 等 于 86 的 概率 约 为 0. 013， 由 此 可 见 安装 87 条 
线路 就 足够 了 ， 对 正 态 逼 近来 说 我 们 首先 要 找 出 方程 1 一 六 (z) 二 0.01 的 根 zx， 由 查 


表 可 得 x 二 2. 327， 于 是 我 们 要 求 ， (N-<—np)/ (npq)* 52.327. 由 于 n=2000, 


p=1/30, BREA NÆ67.17+ (2.327) (8.027) 过 85. 8， 因 此 ， 使 用 正 态 逼近 法 的 结 
果 是 : 只 需 安装 86 条 线路 足够 了 . 

这 两 个 解答 可 以 说 是 一 致 的 .这 种 方法 还 可 以 给 出 田 外 一 些 有 用 处 的 结案 ， 可 
以 这 样 设想 : 把 2000 个 用 户 分 成 两 组 ， 每 组 各 1000 户 ， 从 A 到 B 的 线路 也 与 之 对 
应 地 分 成 两 组 来 安装 . 用 上 述 方法 算 一 算 结果 还 要 多 置 10 RRR, ARM ee 
法 还 是 更 好 一 些 . > 


“7.6 大 Vi 差 


棣 莫 弗 - 拉 普 拉 斯 定理 刻画 了 : 对 固定 的 Z] Al z2, P (a <S, Lz } 的 渐 近 性 
质 ， 但 从 其 推导 过 程 中 清楚 地 看 出 : 4x Me Bin 的 变化 而 变化 时 ， 只 要 xz 一 ce 的 
增长 速度 充分 地 慢 ， 此 定理 仍然 成 立 ， 在 这 种 情况 下 ，(3.17) 两 边 都 趋 于 0， 而 只 
有 当 两 边 之 比 趋 于 1 才 意 义 深远 ,下 一 个 定理 将 说 明 在 何 种 条 件 下 ， 这 个 结 采 是 对 
的 ， 为 简化 表述 ， 代 双重 不 等 式 a <S <e 以 不 等 式 S Oa. 下 述 引 理 将 要 讨论 这 
一 问题 ， 此 引 理 证 明 当 xz 一 ce 时 上 界 x 不 起 作用 . 

引 理 ” 当 x, 一 ce 时 ， 对 任 一 国定 的 70， 有 - 


P{S; > 二 py) a, 


P{S? > az, 66. 1) 


即 是 l 
Pir, < Si Sr, ty ~ PiS, > z,}. (6. 2) 
换言之 ， 当 S 超过 xz, 时 ， 它 非常 靠近 r, 而 在 极限 中 更 大 的 值 不 起 作用 . 
证 ”对 二 项 分 布 ， 应 用 〈3. 2) 中 的 记号 可 得 
PS, > Tn? = Saris P{ S? > zt, +9) -一 Sa. se (6. 3) 
此 处 r, Als, 都 是 整数 ， 而 且 它 们 分 别 与 xz, vnpg C Ty) v npg 之 差 最 多 不 超过 1. 
因为 由 〈3. 4) 知 ， 对 充分 大 的 n 显然 有 
Met 11- (6. 4) 
故 


1. 本 节 中 的 定理 具有 多 方面 的 意义 ， 然 而 在 本 书 中 只 有 在 第 7.4 节 和 第 8.5 节 中 才 用 到 它 . 
2. 在 证 明 中 可 看 出 ， 只 要 rm 一 co 就 足够 了 .更 强 且 更 有 趣 的 版 本 ， 请 见 本 章 习 题 18. 
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了 (6. 5) 
HF co, ATLA (6.3) 中 第 二 个 级 数 的 每 一 项 与 第 一 个 级 数 的 相应 的 项 之 比 是 可 
忽略 的 . > 


现在 推广 到 下 述 形 式 的 极限 定理 . 
定理 ”如果 r, > oo 满足 a Nn —> 0, Bp 


P{S* > x} ~1—NG,). (6. 6) 
由 (1.7)， 渐 近 关 系 (6.6) 完全 等 价 于 ， 
] o d e, 
PIS; > at ~ Tae Te? (6.7) 


证 ”由 前 面 的 引 理 及 定理 3.1 有 : 
PIS >r, ~ Sanh). (6. 8) 


此 处 r, 是 满足 | rha, | <h 的 整数 ， 右 边 的 和 落 在 1 一 R(x, 一 2h) 与 1 一 和 (xz, 十 
2hyzial. FA (1.7)， 此 二 数 之 差 


Nir, + 2h) —RNCx, — 2h) < 4hn(x, — 2h) > 0, (6.9) 
从 而 (6.8) 中 之 和 相当 于 1 一 六 G,). WER. > 
进一步 的 推广 可 看 习题 14 和 16， 
7.7 J 题 


1. 推广 (1.7) 证 明 ， 
1— Rx) ~ 


l a (bas 1*+3 1。3，*，9 
zi 


十 (一 1) Ese L | (7.1) 


BY clon, BRAS C.D 之 右边 高 估 了 1I RN); E k ATRO. DAWA 
hE T 1L). 
2. 对 于 每 个 常数 a>0, Bax — co 时 


(1—n(x+)} 0R) =e (7.2) 


RH 10 000 个 随机 数字 中 ， 数 字 7 出 现 的 次 数 不 多 于 968 次 的 概率 ， 

把 一 颗 仍 子 ， 连 续 掷 12 000 次 ， 求 出 现 “ 么 点 ”的 次 数 在 1900 与 2150 之 间 的 概率 的 近似 值 ， 
求 一 个 数 上 ， 使 得 扔 1000 次 硬币 出 现 “ 正 面 ”的 次 数 在 440 与 之 间 的 概率 约 为 0. 5. 
为 了 求 出 女性 居民 在 居民 中 所 占 的 比 数 f， 进 行 抽样 调查 ， 问 样本 要 取 多 大 方 能 使 抽样 误 
差 小 于 0. 005 的 概率 大 于 等 于 0. 997 

7. 一 个 硬币 扔 了 10 000 次 ， 出 现 5400 次 “正面 ”我 们 是 否 能 够 断言 这 个 硬币 不 均匀 呢 ? 


A a 
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求 三 项 分 布 
t 
Ea EI PPO p po 
中 最 大 项 的 近似 值 . 
泊 松 分 布 的 正 态 逼近 ， 利用 斯 特 林 公 式 证 明 : 如 果 4 -一 oo， 则 对 于 任意 固定 的 a<B 
> Pa > KB) — Na). (7.3) 
Ate VA cea pt 


10. 


11. 


12. 


13. 


14. 


15. 


28 JL4 Dae 4 EE ABE. 4 MN k 为 正 整 数 且 假定 


pm mn hp (7. 4) 
其 中 1/h 二 Vr 十 m) pat (1 一 1 GALE: 
m/e") ~ Anta). (7.5) 


提示 : 用 二 项 分 布 的 正 态 逼近 比 用 斯 特 林 公式 好 . 
正太 分布 及 组 合 连贯 !， 在 第 2 章 〈11. 19) 中 我 们 看 到 ,在 4 个 a 与 m 个 8 的 排列 中 ， 恰 


有 上 个 a 连贯 的 概率 为 
m= (P(E (ne), (7.6) 


与 ng 十 pa Vpn 之 间 的 概率 趋 于 NCB) — Ma). 
大 数 定律 的 一 个 新 证 明 . 从 棣 莫 弗 - 拉 普 拉 斯 定理 证 明 第 6. 4 节 中 的 大 数 定律 . 


大 偏差 的 极限 定理 
应 用 第 3 节 中 的 记号 ， 证 明 : £ kn 之 变化 而 变化 且 满 足 有 /一 0， 则 
a. = bk+mnp) ~ hulkh) oP PPS, h= War O 
这 是 定理 3. 1 的 推广 . 
应 用 上 面 诸 习题 和 第 6 节 的 引 理 证 明 : 
定理 # r, > co 且 满 足以 /7 一 0， 则 
PIS? ~ zx) ~ [1— Raz, ) en PO (7. 8) 
推广 习题 13. S 
A = mi Gon ) v — 和 -十 人 ees 
f(a) = 2 D he x =P-4 zj 十 女人 rtk 十 (7.9) 
wah, h=1//npg. Æ k Mn 之 变化 而 变化 日 满足 &/n > 0, M 
a, ~ hn(kh) + e., (7.10) 


[ 当 OR /n’ > 0， 此 化 为 定理 3.1; 4 k/n > 0 我们 得 到 (7.7); U k/n 0， 我 们 得 
到 《7.7) 中 的 指数 再 加 一 个 4 阶 的 项 ， 等 等 . ] 


1. 参见 [49]， 如 果 想 知道 更 一 般 的 结论 ， 可 参见 L50). 


16. 


17. 
18. 
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习题 14 的 推广 ， 若 x Mn 之 变化 而 变化 且 满 足 ; 1 co， 但 是 r, Nn -0， 则 
P(S} > x} ~ L1— Ra, Jel’, (7.11) 

当 双 /mr > OR, EAM (7.8). 4/ntI> OR, RINT (7.9 式 右边 出 现 的 级 数 
的 4 阶 多 项 式 来 代替 f (zw? )， 等 等 . 
E p>q, WP {Sf >x} >P {S <r) 对 一 切 大 的 xz 成立 提示 : 用 习题 15. 
tn co 目 必 na > 0, WH: 

Plan < Sp < In talx} ~ (ll—e”)Pi > an}. (7.12) 
若 用 语言 表示 即 : 事件 (S >r ta/z,} KF (S 之 zx) 的 条 件 概 率 趋 于 e“. (此 定理 
的 一 个 较 弱 的 版 本 是 由 辛 钦 Khintchine) 证 明 的 . ) 


第 8 章 们 努 利 试验 的 无 穷 序列 


本 章 所 讨论 的 是 关于 伯 努 利 试 验 的 随机 性 的 某 些 性 质 ， 及 与 之 相关 的 重要 的 选 
REM. 但 努 利 试验 的 起 伏 理 论 (至 少 对 p=1/2) 的 一 个 不 同 的 方面 已 包含 在 第 
3 章 中 . 


8. 1] 试验 的 无 穷 序 列 


在 前 一 章 中 我 们 已 经 详细 地 讨论 了 关于 nn 次 伯 努 利 试验 的 概率 ， 同 时 也 研究 了 
当 n -> ce 时 ， 它 们 的 渐 近 性 质 ， 现 在 我 们 转 而 研究 一 类 更 为 一 般 的 问题 ， 其 中 事件 
本 身 在 有 限 的 样本 空间 中 并 不 能 定义 . 

例 一 个 连贯 问题 ， 令 a,8 为 两 个 正 整 数 ， 我 们 考虑 一 个 潜在 的 伯 努 利 试验 的 无 
穷 序 列 ， 壁 如 扔 一 个 硬币 或 者 撕 一 颗 角 子 .设想 甲 与 乙 打 这 样 一 个 赌 ， 如 果 接 连 成 
Th w 次 的 连贯 发 生 在 接连 失败 8 次 的 连贯 之 前 ， 就 算 甲 万 . “ 甲 赢 ”这 个 事件 的 概率 ， 
它 的 直观 意义 是 很 清楚 的 ， 但 是 要 记 件 ， 在 数学 理论 中 事件 这 个 术语 是 代表 “样本 
点 的 集合 ”的 ， 它 只 有 在 适当 地 定义 了 样本 空间 之 后 才 有 意义 ， 为 此 ， 但 努 利 试验 
的 有 限 次 〈 设 2 次 ) 模型 对 我 们 现在 的 情形 来 说 就 不 够 了 ， 但 这 个 问题 只 需 用 简单 
的 取 极 限 的 办 法 就 可 以 解决 ， 在 2” 次 试验 以 后 ， 甲 或 者 获胜 或 者 失败 ， 或 者 不 分 胜 
负 ， 令 对 应 的 概率 分 别 为 zx, ;yy ;ziCZn 十 yi 十 Zz, 二 1)， 当 试验 的 次 数 n 增 加 时 ， 不 分 胜 
负 的 概率 x, 只 能 下 降 ， 而 r, Ry, 一 定 上 升 。 因 此 z= limz,, y= limy, z= limz, 
一 定 存在 ， 所 以 可 把 x,y,z 作为 甲 最 后 获胜 、 失 败 或 胜 负 不 分 的 概率 、 然 而 ， 对 应 
的 三 个 事件 只 能 定义 在 试验 的 无 穷 序 列 所 成 的 样本 空间 中 ， 而 且 这 个 空间 并 不 是 高 
AX HY. 

引进 这 个 例子 仅仅 为 了 说 明 问 题 ， 至 于 ant 的 数值 究竟 是 多 少 不 是 我 们 当前 所 关心 
的 .在 第 13. 8 WA 〈b) 中 可 以 计算 它们 ， 然 而 有 一 个 比较 简单 的 方法 可 以 算出 极限 yz, 
这 个 方法 在 更 一 般 的 场合 也 可 以 应 用 ， 由 于 这 个 方法 重要 ， 而 且 很 有 意思 ， 我 们 现在 就 来 讲 
— iH. 

今 A 表示 接连 成 功 a 次 的 连贯 发 生 在 接连 失败 8 次 的 连贯 以 前 这 一 事件 ， 于 是 A 意味 着 
甲 获胜 ， 而 z= 二 P {A}. 令 凡人 分 别 表示 在 “第 一 次 试验 之 结果 为 成 功 ” 或 “失败 ”的 条 件 下 
事件 A 的 条 件 概率 ， 于 是 x 二 pu 十 qv [第 5 章 1.8). 首先 设 第 一 次 试验 的 结果 为 成 功 ， 于 
是 事件 A 可 以 有 下 面 a 种 互 不 相 容 的 方式 发 生 ， 分 为 两 类 来 描述 : CO) 紧 接 在 后 面 的 a 一 1 次 


« 标 有 星 号 的 这 一 章 与 以 后 各 题材 无 直接 联系 ， 初 读 时 可 以 略 去 . 


8.1 试验 的 无 穷 序列 15] 


试验 的 结果 都 是 成 功 ， 其 对 应 的 概率 为 加 !. (2) 第 一 次 失败 发 生 在 第 ”次 试验 ， 其 中 
20a. 令 这 一 事件 为 H.. FH PH) =p g, 而 P{A|H,) 二 vw， 因此 (再 度 应 用 复合 概率 
公式 ) 


u = pT 'tqltpte-+pT*) = pptt+u(l—p™). (1.1) 
在 第 一 次 试验 的 结果 为 失败 的 情形 下 ， 用 类 似 的 讨论 可 以 得 到 
v= 让 (1 十 gg 十 … 十 gog) 一 UL 一 对 1)， (1.2) 


z= p ETETE (1. 3) 


至 于 求 y 之 计算 ， 只 须 把 (1.3) 中 之 Pp 与 ga 与 8 之 位 置 相 互 对 换 即 可 ， 于 是 


y=? pag erg (1. 4) 
由 于 aty=1, PRU z 二 0， 即 是 说 胜 负 不 分 的 概率 为 0， 

例如 ， 扔 一 个 硬币 Cp 二 1/2》，， 出 现 两 次 “正面 ”的 连贯 在 出 现 3 次 “反面 ”的 连贯 之 前 
的 概率 是 0.7; 出 现 两 次 “正面 ”的 连贯 在 出 现 4 次 “反面 ”的 连贯 之 前 的 概率 是 5/6; 出 现 
3 次 “正面 ”的 连贯 在 出 现 4 次 “反面 ”的 连贯 之 前 的 概率 为 15/22.， ARRET, DAK 
么 点 的 连贯 在 出 现 5 次 非 么 点 连贯 之 前 的 概率 是 0. 1753 ， 等 等 . > 

在 这 一 卷 书 里 我 们 只 限于 讨论 离散 的 样本 空间 的 理论 ， 这 就 大 大 地 破坏 了 数学 
理论 的 完美 性 .在 一 般 理论 中 ， 把 ”次 们 努 利 试验 仅仅 作为 一 个 无 穷 试 验 厅 列 起 始 
的 一 部 分 来 考虑 ， 因 而 一 个 样本 点 是 由 字母 $ (成 功 ) MF CRM) 组 成 的 一 个 无 穷 
序列 来 代表 ， 而 样本 空间 就 是 所 有 这 样 的 序列 的 总 体 ， 一 个 有 限 序列 辟 如 说 SSFS， 
它 表示 最 初 四 次 试验 分 别 为 S,S,F,S 的 那些 样本 点 的 总 体 ， 在 无 穷 的 样本 空间 里 ， 
上 面 关 于 赌博 的 那个 例子 不 需要 用 极限 过 程 就 能 说 明了 . 任 取 一 点 ， 也 就 是 一 个 序 
列 SSFSFF. ... FEE RM, HEE < 个 S 所 构成 的 连贯 可 以 出 现 ， 也 可 以 不 出 现 ， 如 
果 出 现 的 话 ， 那 么 在 这 以 前 ， 也 可 以 出 现 过 “接连 8 个 下 所 构成 的 连 员 ”， 也 可 以 没 
A. 这 样 一 来 ， 所 有 的 样本 点 可 以 分 为 三 类 ， 分 别 表 示 事 件 :“ 甲 获胜 ”、“ 甲 失败 ”、 
“不 分 胜 负 ”， 它 们 的 概率 就 是 上 面 算 出 来 的 z,y,z。 在 这 个 样本 空间 中 惟一 令 人 知 恼 
的 是 : 它 不 是 离散 的 样本 空间 ， 而 我 们 对 一 般 样本 空间 的 概率 又 没有 定义 . 

请 注意 ， 我 们 所 讨论 的 其 实 并 不 是 真 困 难 ， 而 是 一 个 术语 的 问题 ， 拿 我 们 的 例 
子 来 说 ， 问 题 不 在 于 数 x 的 定义 下 得 适当 不 适当 ， 及 对 它 的 解释 给 的 正确 不 正确 ， 
问题 仅仅 在 于 ， 为 了 避免 自 相 矛盾， 我 们 要 么 把 chime “En RA A 
Rr, 的 极限 ”， 要 么 把 它 说 成 是 “ 甲 赢 ” 的 概率 ， 而 样本 空间 不 是 离散 的 .我 们 打算 
两 种 办 法 都 用 .为 了 语言 的 简短 ， 我 们 使 用 事件 这 一 术语 ， 即 使 它们 是 定义 在 无 穷 
的 样本 空间 中 ， 为 了 理论 的 精确 ， 叙 述 定 理 时 要 先 用 有 限 的 样本 空间 ， 然 后 过 小 到 
极限 ， 这 一 章 里 所 研究 的 事件 都 具有 上 述 例子 的 如 下 的 特色 ;“ 甲 获胜 ”这 一 事件 虽 
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然 征 定义 在 无 穷 的 样本 空间 中 的 ， 但 它 可 表 为 “ 甲 在 第 n 次 试验 获胜 ”(n 二 1，2,…) 
的 那些 事件 的 并 ， 它 们 中 的 每 一 个 只 依赖 于 有 限 次 试验 . 我 们 所 要 求 的 < 是 单调 序 
ic, 的 极限 ， 这 些 概 率 z, 只 依赖 于 有 限 次 试验 . 我们 并 不 需要 比 半 次 伯 努 利 试验 模 
型 的 理论 更 高 的 理论 ; 我 们 只 不 过 简化 了 累 著 的 表达 '， 把 本 来 是 “概率 的 极限 ”的 
一 些 数 字 叫 作 概 率 . 


8.2 赌博 的 长 策 


很 多 赌 徒 的 惨痛 经 历 使 我 们 得 到 这 样 一 个 教训 ， 没有 一 种 赌博 长 策 能 成 功 地 改 
BIEN ALIA. 如 果 概 率 论 正确 反映 生活 的 话 ， 这 个 经 验 就 应 该 对 应 于 一 个 可 以 证 
明 的 命题 . 

为 了 确定 起 见 ， 让 我 们 考虑 一 个 湾 在 的 但 努 利 试验 的 无 穷 序 列 ， 而 且 假 定 在 每 
一 次 试验 中 赌 徒 都 有 选择 赌 或 者 不 赌 的 自由 ， 所 谓 赌 博 的 “长 策 *， 就 是 赌 徒 事先 制 
定 的 一 套 规则 ， 来 决定 哪 一 次 该 赌 ， 例 如 ， 赌 徒 可 以 决定 在 每 个 第 7 次 上 赌 ， 或 者 
在 赠 一 次 之 后 ， 再 出 现 7 次 “正面 ”之 后 的 那 一 次 赌 ， 他 也 可 以 只 在 “正面 ”连续 出 
现 13 次 以 后 才 赌 ; 或 者 在 第 一 次 “正面 ”出 现 以 后 赌 第 一 次 ， 然 后 在 头 一 回 连 续 出 
现 两 次 “正面 ”以 后 赌 第 二 次 , 一 般 地 ,在 连续 出 现下 次 “正面 ”以 后 就 赌 第 RK. 
在 最 后 一 种 情况 ， 他 赌 的 频次 将 是 越 来 越 少 的 . 我 们 并 不 需要 考虑 个 别 试验 的 赌注 ， 
我 们 将 要 证 明 没 有 一 个 “长 策 ” 可 以 改变 赌 徒 的 处 境 ， 他 们 所 得 到 的 结果 和 每 次 都 
赌 是 一 样 的 ， 不 言 而 喻 ， 只 能 在 通常 意义 下 的 “长 策 ”， 即 在 赌 徒 不 知 未 来 的 情况 下 
才能 证 明 这 个 命题 (至 于 真正 的 未 卜 先 知 存在 与 否 的 问题 并 不 是 我 们 所 关心 的 . ) F 
时 ， 像 “ 输 了 3 次 以 后 便 回 家 ”这 类 规则 是 可 能 改变 赠 徒 的 处 境 的 ， 不 过 这 些 没 意 
思 的 长 策 我 们 把 它 除外 . 

长 策 的 定义 是 一 套 规则 ， 这 套 规则 ， 在 每 一 轮 嗜 博 中 ， 惟 一 地 决定 赌 徒 是 参加 
赌 还 是 不 参加 赌 ， 在 第 有 次 试验 上 ， 他 的 决策 可 以 依赖 于 以 前 的 & 一 1 次 试验 的 结果 ， 
但 是 不 可 以 依赖 于 第 上 ,十 1 ,kk 十 2,… 次 试验 结果 ， 最 后 ， 这 些 规则 还 要 求 能 够 保证 ，; 
赌博 可 以 无 穷 地 继续 下 去 ， 因 为 规则 是 固定 的 ， 所 以 “在 nn 次 试验 中 赌 徒 参加 赌 的 
次 数 超过 > 次 ”的 事件 是 有 定义 的 ， 而 它 的 概率 是 可 以 计算 出 来 的 . 上 面 定 义 里 的 最 
后 的 条 件 要 求 对 任何 一 个 +r， 当 nn > co 时 这 个 概率 趋 于 1. 

我 们 的 基本 定理 是 ， 无论 长 策 是 什么 ， 赌 徒 参加 赌博 的 那些 次 试验 组 成 一 个 伯 
努 利 试验 序列 其 成 功 概率 不 变 ， 如 果 在 措 词 方面 做 适当 的 修改 ， 这 个 定理 对 一 切 类 
型 的 独立 试验 都 成 立 ， 在 任何 情况 下 ， 进 行 赌 博 的 那些 次 试验 都 是 原来 试验 的 一 模 


1. 如 果 读 者 对 一 般 测度 论 较 熟悉 的 话 ， 那 么 这 个 情形 可 以 描述 如 下 . 我 们 仅仅 考虑 这 样 一 些 事件 ， 或 
者 它 只 依赖 于 有 限 次 试验 ， 或 者 它 只 是 这 类 事件 的 单调 序列 的 极限 .我 们 计算 这 些 明 显 的 概率 的 极 
限 ， 显 然 这 并 不 需要 测度 论 ， 然 而 只 有 在 测度 论 里 才能 证 明 : 这 样 的 极限 值 不 依赖 于 特殊 的 取 极 限 
的 过 程 ， 而 且 是 完全 可 加 的 . 
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一 样 的 仿制 品 ， 所 以 没有 一 个 长 策 可 以 改变 赌 徒 的 运气 ， 这 个 命题 的 重要 性 首先 由 
汐 。 米 泽 斯 所 发 现 ， 他 把 它 作 为 基本 公理 而 引进 ， 即 所 谓 有 效 的 赌博 长 策 的 不 可 能 
性 ， 这 里 的 陈述 及 证 明 都 是 引用 杜 布 的 ,为 了 简单 起 见 ， 我们 假定 p= 1/2. 

令 A, 表示 “第 一 次 赌博 发 生 在 第 & 次 试验 ”这 一 事件 .长 策 的 定义 要 求 ， 当 
n co 时 ， 在 第 nn 次 试验 以 前 进行 第 一 次 赌博 的 概率 趋 于 1， 也 就 是 PLA) HPL) 
十 … 十 PiA,} 一 上， 或 

UP{A,}=1. (2.1) 

其 次 ， 令 B, 表示 “第 & 次 试验 出 正面 ”的 事件 . PA “BRAME ARKA oe E 
出 现 正面 ”的 事件 如 是 事件 A, B, AB, ABe I MAEHE. AA 
A, 只 依赖 于 最 初 & 一 1 次 试验 的 结果 ，B 只 依赖 于 第 & RIAR, HMA A, 及 B 年 相互 
Mi AT P (ABIS PIAS P(B TIPAN WPD B} = X P(A,Bi} = 


L/2UPiA js =>. 这 就 说 明 在 这 个 长 策 下 第 一 次 赌博 中 出 现 “ 正 面 ” 的 概率 为 1/2， 


A, iF LUE A ck A GOR Ua 
还 要 证 明 的 是 ， 要 赌 的 那 一 串 试验 是 独立 的 ， 这 就 意味 着 在 第 一 、 第 二 两 次 赌 
博 中 硬币 都 出 现 “ 正 面 ” 的 概率 为 1/4 (以 此 类 推 到 其 他 的 组 合 以 及 此 后 的 试验 ). 
为 了 验证 这 个 论断 ， 令 A? 表示 “第 二 次 赌博 在 第 次 试验 ”的 事件 ， 令 玉 表 示 “ 头 
两 次 赌博 都 出 现 “正面 '” 的 事件 , E EIRA BA BWH, 这 里 j<k CS 
k, WA, Ad EJF, 从 而 AAS =0). Att 
= 5) >) P{A,B,ALB,} . (2. 2) 


同样 ， 我 们 可 以 看 出 ， 对 固定 的 >j, REB 〈“ 第 不 次 试验 出 现 正面 ") 与 事件 
AB AL ( 它 仅 依赖 于 最 初 一 1 次 试验 的 结果 ) 是 相互 独立 的 ， 因 此 


P{E} = 15 > PABA; } 
j=l k=j+l (2.3) 


= = 5 PK P{A,B,} >) P(A; | A;B;) 
k=j41 


[参见 第 5 章 1.8]. 但 是 ， 不 管 第 一 次 赌 是 在 哪 次 下 注 的 ， 也 不 管 它 的 绪 采 如 何 ， 
赌博 总 是 继续 下 去 的 ， 这 就 是 说 : 第 二 次 赌博 迟早 会 发 生 的 ， 即 对 于 已 知 有 具有 
P{(AB)>0 的 ABi， 将 “第 二 次 赌博 在 第 & 次 试验 发 生 ” 的 条 件 概率 对 站 加 起 来 应 
为 1. 所 以 (2.3) 中 的 第 二 个 级 数 之 和 为 1， 同 时 我 们 早已 知道 之 P{(A;Bi} 王 1/2， 故 
P{FE}) 二 1/4.， 这 就 是 我 们 所 要 证 明 的 . 对 其 他 的 组 合 可 用 类 似 的 论证 . > 
注意 ， 如 果 赌 者 可 以 任意 改变 赌注 的 话 ， 情 况 就 不 一 样 了 . OTK ARG 
的 长 策 ， 就 存在 所 谓 有 利 策略 ， 而 且 赌 博 与 策略 有 关 . 关于 这 一 点 ， 我 们 将 在 第 
14.2 节 里 再 来 讨论 . 
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8.3 ” 波 雷 尔 - 坎 特 立 引 理 


有 两 个 关于 试验 的 无 穷 序 列 的 引 理 是 经 常 要 用 到 的 ， 所 以 应 该 特别 加 以 注意 . 我 
们 仪 仅 对 伯 努 利 试 验 来 陈述 这 两 个 引 理 ， 但 是 ， 对 于 普遍 的 情况 ， 它 们 还 是 可 以 应 
用 的 . 

我 们 还 是 考虑 一 个 无 穷 的 伯 努 利 试 验 序列 . 令 Al An eA BEN ICA Pe 
其 中 每 一 事件 只 依赖 于 有 限 次 试验 ， 换 言 之 ， 我 们 假定 对 于 每 一 个 A:， 对 应 地 存在 
一 个 m, E1 A, BERUK n 次 伯 努 利 试验 的 样本 空间 中 的 事件 . S 

a, = P\A,}. (3.1) 
A, A 代表 “在 2k 次 试验 完了 时 出 现 一 个 最 少 接连 有 & 次 成 功 的 连贯 ”的 事件 ， 
则 n, =2k, W a= p.) 

对 于 字母 S 和 下 的 某 个 特定 的 无 穷 序列 ， 都 可 以 确定 它 属 于 141A} 中 的 0 个 或 1 
个 或 2 个 …… 或 者 无 穷 多 个 . 这 意味 着 我 们 可 以 谈 到 事件 U,， 它 是 使 事件 族 (Ai} 中 
有 多 于 > 个 发 生 的 无 穷 试 验 序 列 ， 而 Uw 则 表示 使 事件 族 (Ai} 中 有 无 穷 多 个 发 生 的 无 
BRIA. BAU, 只 能 在 无 穷 的 样本 空间 中 定义 ， 而 它 的 概率 是 PU, WR, 
此 处 P{U,,} 为 nn 次 试验 中 有 多 于 r 个 A 发 生 的 概率 ， 最 后 ，P{U。} 二 lim PiU,}, 
此 极限 是 存在 的 ， 因 为 当 7 增 加 时 ，P{U,} 下 降 , 

引 理 1 twa, 收敛 ， 则 只 有 有 限 个 A 发 生 的 概率 为 1，( 更 精确 地 说 ， 就 是 
要 求 ， 当 7 充分 大 时 )，PI{U,) 二 e。 或 者 说 ; 对 每 个 e 之 0 可 以 找到 这 样 一 个 整数 六 
使 得 对 每 个 n,n 次 试验 中 有 A,ii,A,1;，,… 里 的 一 个 或 多 个 发 生 的 概率 小 于 e. 

证 A FRR Da, Woy 故我 们 可 以 取 定 一 个 rs 使 ami Fam be. 不 失 其 
普遍 性 ， 我 们 可 以 假设 A, 是 如 此 排列 的 ， 使 得 m SmS Ss SN Ali nnn 成 
立 的 最 后 一 个 下 标 ， 于 是 4 ,…,An 都 在 2 次 试验 的 样本 空间 中 定义 了 .而 引 理 的 结 
论 是 要 求 : 在 Amis Anas tts An 中 有 一 个 或 多 个 发 生 的 概率 小 于 e。， 这 个 结论 是 成 
立 的 ， 因 为 从 第 1 章 的 不 等 式 (7. ORITA 

PAn U A Uo U An} S amı Fam te tan Se. (3. 2) 
至 此 ， 引 理 证 毕 . > 

上 述 引 理 ， 只 有 在 A, 相互 独立 的 条 件 下 ， 才 有 一 个 圆满 的 逆 命 题 ， 当 试验 串 分 
为 一 些 互 不 重 迭 的 段落 ， 而 A 只 依赖 于 第 个 段落 中 的 试验 时 ， 独 立 性 条 件 就 成 立 
T. (例如: A, 表示 “第 & 个 千 次 试验 中 产生 的 成 功 次 数 多 于 600” 的 事件 . ) 

引 理 2 如 果 A, 相互 独立 , MADXa 发 散 ， 则 有 无 穷 个 人 发 生 的 概率 为 1 
(换言之 ， 对 任意 一 个 r， 在 邯 次 试验 中 多 于 -个 4 发 生 的 概率 随 ? 一 ce 而 趋 本 1). 

证 ”假设 引 理 不 对 ， 则 存在 一 个 x， 使 ， 当 有 >n 时 没有 一 个 A, 发 生 的 概率 u>. 
但 是 

u < (l —a,) Q — ami) C — a), (3. 3) 
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(3.3) 成 立 是 由 于 其 右边 是 在 当 n<h<ntr tt, A, Ages ，,…,A,s, 中 无 一 发 生 的 概 
率 ， 因 为 1 一 x<e*， 所 以 (3.3) 右边 小 于 等 于 e “和 2， 而 其 指数 当 - 充 分 大 时 
可 任意 大 ， 故 wx 一 0， 引 理 得 证 . > 

例 (a) 在 一 个 伯 努 利 试验 序列 中 ， 序 列 SFS 出 现 无 穷 多 次 的 概率 是 多 少 ? SA 
表示 在 第 &,& 十 1,& 十 2 次 出 现 花 样 SES. A, 显然 不 是 独立 的 ， 但 是 序列 A, A, AD, 
Ai,… 只 包含 相互 独立 的 事件 , 〈 因 为 其 中 任意 两 个 事件 都 不 依赖 于 同一 次 试验 的 结 
果 . ) 由 于 ap’ 是 不 依赖 于 k 的 ， 故 级 数 a, +a 十 十 … 发 散 ， 从 而 序列 SPS 无 
穷 次 地 发 生 的 概率 为 .显然 , 类 似 的 论证 可 以 应 用 到 任何 一 个 序列 上 去 . 

(b) 扔 硬币 产生 的 书 ， 考 虑 一 条 由 点 和 横 线 写 在 电码 上 的 信息 : “概率 是 奇妙 
的 ”， 如 果 我 们 用 H 和 工分 别 代表 点 和 横 线 ， 那 么 ， 这 条 信息 将 以 有 限 长 的 相继 出 现 
的 正面 与 反面 构成 ， 由 上 面 一 个 例子 推 知 ， 多 次 扔 一 个 硬币 ， 迟 早 会 生成 这 一 信息 ， 
并 能 无 穷 多 次 重复 这 一 信息 ， 同 样 地 ， 取 很 多 次 扔 硬币 的 游戏 中 的 一 段 有 限 长 的 记 
录 ， 它 可 以 包含 电码 中 的 一 部 长 度 可 观 的 书 ， 例 如 “ 汉 姆 雷 特 ” 和 8 位 对 数 表 ， 有 人 
提议 把 一 群 猴子 训练 成 乱 击 的 打字 员 ， 它 们 迟早 会 随机 地 打印 出 一 部 伟大 的 作品 . 
为 了 同样 的 目的 ， 一 个 硬币 可 以 节省 喂养 和 训练 费用 ， 并 放任 猴子 而 做 其 他 的 猴子 
营 生 . 
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概率 的 直观 概念 是 基于 下 述 事实 的 成 立 的 期 望 : SS, 是 但 努 利 试验 序列 中 前 
次 试验 的 成 功 次 数 ， 则 


Ss p, (4.1) 


n 

在 抽象 理论 中 ， 这 不 能 对 于 每 一 个 试验 序列 都 成 立 ， 事实 上 ， 在 我 们 的 样本 空间 中 
包含 着 这 样 一 个 点 : 它 是 只 由 成 功 构成 的 无 穷 序 列 ， 对 它 来 说 : S./n—1, 因此， 
(4.1) 就 不 对 了 . 然而， 我 们 可 以 证 明 (4.1) 概率 为 1 地 成 立 ， 于 是 4.1) 不 成 立 
的 情形 是 可 以 忽略 的 例外 . 

注意 ; 在 这 里 我 们 所 讨论 的 命题 要 比 弱 大 数 定律 [第 6 章 (4. 1)] RES. 后 者 
只 是 说 ， 对 每 个 充分 大 的 固定 的 nn 来 说 ,平均 数 S,/n 5p 差不多 ,但 它 并 没 说 当 
增加 时 ，S,/n 一直 停留 在 p 的 固定 的 邻 域内 ， 在 7 次 附加 的 试验 中 ， 事 件 Sk 
p 一 e,(n<<k< 之 2n) 中 至 少 有 一 件 发 生 仍 是 可 能 的 ， 因 为 它 是 很 多 个 小 概率 之 和 ， 而 我 
们 只 知道 每 个 个 别 的 概率 很 小 而 已 。 但 现在 我 们 可 以 证 明 ， S,/n 一 pp 概率 为 1 变 得 很 
小 ， 并 且 保 持 很 小 . 

强大 数 定律 ”对 于 每 个 e 盖 0， 在 事件 


1. 此 旋 莎 士 比 亚 一 部 悲剧 的 剧 名 ， 一 一 去 者 注 
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S p|>e (4.2) 


P, RAARPTREAREA 1. APRA C. 1) 概率 为 1 地 成 立 ， 在 有 限 
的 样本 空间 中 ， 它 断言 ， 对 每 一 组 e>>0，6>>0， 有 一 个 ~， 使 得 对 一 切 vu， 适合 下 面 v 
个 不 等 式 ， 

S, 
r-k 


-p| <e R=1,525°** U, (4, 3) 


同时 成 立 的 概率 大 于 1 一 6. 
证 ”我 们 将 证 明 一 个 更 强 的 命题 . OA, 表示 事件 


S,—k 
| Si | = Be > /2a log k, a>. (4,4) 
于 是 由 第 7 EAR 〈6.7)， 至 少 对 所 有 充分 大 的 有 
PLA} < et = = (4. 5) 


MELPO ua, Alb A — AA 1 可 以 保证 : 只 有 有 限 个 (4.4) 型 的 不 等 
式 成 立 的 概率 为 1。 另 一 方面 ,车 4.2) 成 立 ， 则 


S, onp € 
> + is (4, 6) 
Vnpg | Vpa ~ 


而 当 n 充分 大 时 ， 右 端 大 于 (V2a log n)， 因 此 无 穷 多 个 4.2) 型 的 不 等 式 成 立 就 
蕴涵 了 无 穷 多 个 A RÆ. MUE ERLA (4.2) 成立) 的 概率 为 零 . 这 就 证 明 
了 我 们 的 强大 数 定律 . > 

强大 数 定律 最 初 为 坎 特 立 所 陈述 ， 其 先 波 雷 尔 及 褒 司 多 夫 (Hausdorff) 讨论 了 
一 些 特殊 情况 .正如 弱 大 数 定律 一 样 它 只 是 随机 变量 一 般 定理 中 的 极为 特别 的 情形 . 
把 我 们 的 定理 与 长 策 之 不 可 能 性 联系 起 来 . 不 仅 对 原来 的 试验 序列 而 且 对 于 按照 第 2 
节 中 的 规则 所 得 到 的 一 切 子 序列 来 说 ， 大 数 定律 都 蕴涵 了 极限 〈4. 1) 的 存在 性 . 因 
而 这 两 个 定理 一 起 描述 了 随机 性 的 基本 性 质 ， 这 些 性 质 都 是 概率 的 直观 概念 所 固有 
的 ， 它 们 的 重要 性 曾 由 冯 “。 米 泽 斯 特别 加 以 强调 过 . 


8.5 XT ŽOGE M 


像 第 7 章 一 样 ， 让 我 们 再 引进 次 试验 中 正则 化 的 成 功 次 数 . 
Snp 
S; pe (5. 1) 
拉 普 拉 斯 极限 定理 断言 ，P{S’* az} ~~1 一 条 (x)， 因 此 对 于 的 每 一 个 特定 的 值 来 说 ， 
S 取 大 值 的 概率 是 不 大 的 . 人 但是， 直观 上 看 来 很 清楚 : 在 漫长 的 试验 序列 中 ，S; 
或 壕 或 早 地 会 取 任 意 大 的 值 ，S; 的 中 间 值 是 最 概 然 的 ， 但 是 它 的 最 大 值 也 在 慢 步 地 
增长 着 ， 增 长 的 速率 如 何 ? 在 强大 数 定 律 的 证 明 过 程 中 ， 我 们 曾经 断言 KM (4. 5) 
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可 推出 对 每 一 个 a 之 1 和 全 部 充分 大 的 n RER S< (2a log n)? 概率 为 1 地 成 立 . 
这 就 给 出 了 S 起 伏 的 上 界 ， 但 是 这 个 上 界 不 好 .为 了 看 出 这 点 ， 让 我 们 把 这 个 结论 
应 用 到 子 序列 S; SiS Shoe E 即 我 们 定义 事件 A, 为 S Ca log &)*， 现 在 
因为 不 等 式 (4.5) BIR S< Qa log k)? Xt a>1 和 一 切 充分 大 的 有 但 是 ， 对 
n=2', RIJE log k~log log 2， 因 此 我 们 断言 : 对 于 每 一 个 a 之 1 和 全 部 形 如 n 二 2 
的 n， 不 等 式 

S} < V2a log log n (5.2) 
对 某 个 以 后 全 成 立 ， 所 以 合适 地 猜测 ， 应 该 是 〈5. 2〉 对 一 切 充分 大 的 n 都 成 立 ， 
EXE, 它 是 迭 对 数 法 则 的 一 部 分 , 这 个 定理 断言 ，w2 log log n 是 在 下 述 意义 下 的 
精确 的 上 界 : 对 于 每 一 个 a1, FER 6.2) 的 有 反 不 等 式 对 无 穷 多 个 n 成立. 

定理 AŤ 


S* 
lj 一 一 一 一 一 =], (5.3) 
aE v 2log log n 
以 概率 为 1 地 成 立 . 这 意思 是 说 : 如 果 a>, m 
S, > np +A v2npg log log n (5.4) 


之 中 只 有 有 限 个 发 生 的 概率 是 1]， 如 果 )<1， 则 (5.4 ) 对 于 无 穷 多 个 区 成 立 的 概率 
Æ l. 
由 于 对 称 性 ， 方 程 (5.3) AWT 
o, S; 
lmi A low n 一 一 上 | (5. 3a) 
证 “我们 先 从 以 下 两 个 预备 性 的 附注 人 手 . 
(1) 存在 这 样 一 个 常数 c>0， 它 依赖 于 p 而 不 依赖 于 nw， 使 得 对 一 切 的 nn 都 有 
PS, > np) >c. (5. 5) 
事实 上 ， 考 察 二 项 分 布 ， 得 知 (5. 5〉 的 左边 永 不 为 零 ， 而 且 由 拉 普 拉 斯 极限 定理 得 
知 当 nn 一 co 时 它 趋 于 1/2， 所 以 它 总 有 大 于 0 之 下 界 ， 这 就 证 明了 我 们 的 附注 . 
(2) 我 们 需要 下 面 的 引 理 , 令 r HE, 日 令 A 表示 以 下 事件 : 至 少 有 一 个 
上 ,kn， 使 
S, —kp > x. (5. 6) 
那么 
P{A} <c? PIS, — np > zx}. (5.7) 
为 了 证 明 引 理 ， 令 A, 表示 使 65.6) 在 有 = 立时 成 立 的 事件 ， 但 kÆ, 2, vl, 
(此 处 l<u<n) 的 事件 ，Al ,A,,…,A, 是 互 斥 的 ， 同 时 它们 的 并 是 A， 因 此 有 


1. 参见 [52]， 此 处 的 结论 是 由 其 他 一 些 学 者 的 部 分 结果 得 到 的 ， 现 在 的 证 明 可 以 直接 推广 到 更 一 般 
的 随机 变量 . 
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P{A} = P(A} + P{A:) +++ PiA,}. (5.8) 
其 次 对 v 二 n, © U, 表示 “在 第 wv 十 1,v 十 2,…,n 次 试验 中 成 功 的 总 次 数 超 过 
(n 一 v) p” 的 事件 . 若 两 个 事件 ALU, 都 发 生 ， 则 S, >S, Hinu p>nptHr, X 
因为 ALU, BEA, PTA 
PS, —nprxs 2SP{A,U,}+P(A,U,}++ 
HPA, Uni) 7 P(A, }. (5.9) 
因为 A, 只 依赖 于 最 初 那 ride, U, 只 依赖 于 其 后 的 2 一 "次 试验 . 因此 A U, 是 
相互 独立 的 ， 从 而 P{A.U,}=P(A,}P(UL}. 从 《5.5) 中 我 们 知道 ，PIU。) 盖 c 盖 0， 
HA c<1, A 6.8) 和 6.9) 可 得 
PS, —np>x} ch P(A,}=cP{A}. (5.10) 
这 就 证 明了 《5.7). 
(3) 现在 我 们 来 证 明定 理 中 关于 《5.4) A A>] 的 那个 部 分 ， S y 表示 这 样 一 
个 数 ， 使 得 
l<y<a, (5.11) 
MA n 表示 最 靠近 y(r 王 1,2,…) 的 整数 ， 令 B, 表示 以 下 事件 : 至 少 对 一 个 
N,<N<N +) 5 
S, — np >A V2npq log log n, (5.12) 
成 立 ， 很 显然 只 有 当 无 穷 多 个 B, BAN 6.4) 才能 对 无 穷 多 个 2 成立， 应 用 第 一 个 
波 雷 尔 - 坎 特 立 引 理 ， 我 们 看 出 只 需 证 明 
2 P{ B, KA (5.13) 
就 够 了 ， 由 不 等 式 (5.7) 可 知 
~ P{B,} < PAS, — np >a V2n,pq log logn, } 


=c'P\s; >A, /2 — log log n, | (9. 14) 
r+] 


因为 2 /YA ， 所 以 对 充分 大 的 y， 有 


P{B,} <c'P{S* > V2AMog logn, }- (5.15) 
因此 ， 由 第 7 EAA (5. 2)， 可 知 ， 对 相当 大 的 +， 有 
PIB} oe Ll - (5. 16) 


cClog n,)? cr log y)* 
AIA AD 1, HR 6.13 的 结论 得 证 . 
(4) 最 后 ， 我 们 来 证 明 关 于 65.4) 中 的 4 过 1 的 那 一 部 分 ， 这 人 时 我 们 选取 y 为 很 
大 的 整数 ， 使 得 


> >a (5. 17) 


其 中 wy 是 在 以 后 要 决定 的 一 个 第 数 , 令 nn 二 Y "， 由 于 第 二 个 流 雷 尔 - 坎 特 立 引 理 只 能 
对 独立 事件 才能 应 用 ， 故 我 们 引进 


fag 
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D, = S, — S, . (5. 18) 
D, 是 从 第 ”一 :次 以 后 到 第 n 次 〈 包 括 第 n 次) 试验 中 成 功 的 总 数 . 对 DD, 我 们 有 二 
项 分 布 b5(k;n,P)， 其 中 二 nn 一 n,_1. & A, 为 事件 

D,— (n,— 1-1) p > 4 /2pqn, log log n,. (5,19) 
往 证 无 穷 多 个 A,， 概 率 为 1 地 发 生 ， 由 于 各 个 不 同 的 A,， Wi TED EEA E 
4, in <n <n,, DRED A, 只 依赖 第 n, +1 到 第 n 次 试验 . ) 故 {A,} 是 相互 独立 
的 ， 因 此， 根据 第 二 个 波 雷 尔 - 坎 特 立 引 理 ， 只 人 须 证 明 : DPA, RRO TS. 1B 


P{A,} = PID > n, | 2 一 一 一 一 log log ne | . (5. 20) 
af (n, — n) pg n, — n, 
由 (5.17) 可 知 n/ m,n) =y/ (Y1) <n. 因此 
D, 一 1 
P(A} > P| 二 和 = > V27 Tog log m, |. (5. 21) 
VV (n, — n) pq . 


再 利用 第 7 章 (6.7) 的 估计 ， 我 们 发 现 对 相当 大 的 > 


1 — y log log n, 1 
PIA.) > iog log nS i 


~ Clog log n,) Clog n,)” 
An =r", MA wy 过 1， 故 对 充分 大 的 r+ 我 们 有 了 {A,) 二 1/r， 这 就 证 明了 级 数 
XPA, RR. 

证 明 的 最 后 一 步 是 要 验证 (5，18) 中 的 S， 可 以 略 去 .从 我 们 已 经 证 明了 的 定 
理 的 第 一 部 分 可 知 ， 对 每 一 个 e>0 都 可 以 找到 这 样 的 一 个 NN， 使 得 对 一 切 rN 


(5.22) 


|S, =ni p | <2 v Zpanlog log nı (5. 23) 
的 概率 大 于 等 于 le 现在 选取 ”非常 接近 于 1， 使 得 

(TY. (5. 24) 

FEM 6.17) 可 得 
An, =4n,y '<n,Cq7A)’ ， (5. 25) 

因此 (5.23) WAW 
S, — nmp >— (q— à) V2 pam, log log n. (5. 26) 
把 (5.26) 加 到 (5.19) 上 去 ， 我 们 得 到 6.4) 对 ”一 六 成立. 这 就 推出 这 个 不 等 
式 对 无 穷 多 个 7 成 立 的 概率 大 于 等 于 1 一 e， 这 就 完成 了 我 们 的 证 明 . > 


ARPER EMT BOE M FE — 7 ee PPR R.A eB 
“ 科 尔 莫 戈 罗 夫 中 所 首先 提出 的 ， 现 在 有 可 能 提出 更 强 的 定理 〈 参 看 本 章 习题 BY 
是 8). 
8.6 用 数论 的 语言 解释 


A> r HKE Oar <1 中 的 一 个 实数 ， 且 令 
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工 一 Q1do03 (6. 1) 
是 它 的 十 进位 小 数 的 展开 式 〈 于 是 每 个 a 代表 数字 0,1,…,9 中 的 某 一 个 )， 除 了 
a/10" 型 的 数 以 外 (a 为 整数 )， 上 面 的 展开 式 是 惟一 的 . 因为 a/10” 既 可 使 其 展开 式 
表 为 有 限 多 位 (包含 无 穷 多 个 0) 又 可 使 其 展开 式 包 含 无 穷 多 个 9， 为 了 避免 混乱 起 
见 ， 我 们 决定 不 用 后 一 种 形式 . 

十 进位 小 数 的 展开 式 可 以 与 一 个 具有 p 二 1/10 的 伯 努 利 试验 联系 起 来 ， 数 字 0 
代表 成 功 ， 其 他 的 9 个 数字 代表 失败 . 如 果 在 (6.1) PA SREO, APRA 
的 数字 ，(6. 1) 就 代表 了 具有 p=1/10 的 伯 努 利 试验 无 穷 序列 的 一 个 可 能 结 采 . 反 
过 来 ， 任 何 一 个 由 字母 $S 和 下 所 组 成 的 序列 都 可 以 由 某 个 xz 的 十 进位 小 数 的 展开 式 
按 上 面 的 方式 得 之 . 按照 这 种 方法 ， 伯 努 利 试验 的 样本 空间 中 每 个 事件 都 可 以 用 z 的 
某 个 集合 来 表示 . 例如 :“ 第 次 试验 为 成 功 ” 的 事件 可 以 用 第 位 小 数 为 0 的 那些 x 
来 表示 . 这 些 x 就 构成 了 10”! 个 区 间 ， 每 个 区 间 之 长 为 10“， 它们 的 总 长 为 1/10， 
这 就 是 这 一 事件 的 概率 ， 每 一 个 长 为 n 的 有 限 的 样本 序列 对 应 于 茶 些 区 间 的 集合 ， 
例如 ， 序 列 SES 对 应 于 下 面 9 个 区 间 : 0. 01 志 x 过 0. 011,0. 02 委 z<<0. 021，…,0. 09 
Xx 过 0, 091， 每 一 个 这 样 的 样本 序列 的 概率 等 于 其 所 对 应 于 zz 轴 上 之 区 间 集 合 的 总 长 
度 ， 更 复杂 一 些 的 事件 常常 可 以 用 有 限 个 样本 序列 的 并 来 表示 ， 从 而 计算 前 者 的 概 
率 可 以 按照 与 x 轴 上 常用 的 勒 贝 格 (Lebesgue) 测度 相同 的 加 法 规律 来 进行 。 因 此， 
我 们 的 概率 永远 可 以 与 x 轴 上 对 应 的 点 集 的 测度 一 致 ， 于 是 我 们 可 以 把 具有 p=1/10 
的 伯 努 利 试验 的 一 切 极限 定理 翻译 成 关于 十 进位 小 数 展 开 式 的 定理 .术语 “概率 为 1 
地 ”等 价 于 “几乎 一 切 x” 或 者 “几乎 处 处 ”. 

我 们 曾经 考虑 过 nn 次 试验 中 成 功 的 次 数 S, 这 一 随机 变量 ， 为 了 方便 起 见 ， 在 这 
里 我 们 着 重 指出 下 面 的 事实 : S, 是 样本 点 的 函数 ， 我 们 用 S, (x) 代 表 工 的 前 n 位 小 数 
中 0 的 个 数 ， 显 然 ，S,(z) 是 工 的 函数 ， 其 图 形 为 阶梯 多 边 形 ， 它 的 不 连续 点 只 能 在 
a/10 型 的 点 上 ， 其 中 a 为 整数 、 比 值 5S, Cx)/n 称 为 x 的 前 位 小 数 中 零 的 频率 . 

在 通常 测度 论 的 语言 里 ， 弱 大 数 定律 所 断言 的 是 ，S; (x)/n > 1/10 FER. 
而 强大 数 定律 所 断言 的 是 ，S; (x)/n 一 1/10 几乎 处 处 收敛 . SE BR AS LK Ot AE OW BE 
是 说 | 
lim sup 0 3/2 
对 几乎 一 切 工 成 立 ， 它 回答 了 一 系列 论文 处 富 中 所 研究 过 的 一 个 问题 . 这 个 结果 的 
更 进一步 的 改善 ， 请 参看 本 章 习 题 7 及 习题 8. | 

除了 数字 0， 我 们 也 可 以 考虑 用 其 他 的 数字 . 那么 强大 数 定律 可 以 解释 为 : SDL 
乎 _ 切 xz， 这 (0,1,…，,9) 10 个 数字 中 每 一 数字 的 频率 都 趋 于 1/10， 如 果 把 十 进位 
系统 的 基 “10” 换 为 其 他 的 基 ， 就 可 得 出 类 似 的 定理 .这 个 事实 曾 为 波 雷 尔 (1909) 
所 发 现 ， 且 往往 表述 为 :几乎 一 切 的 数 都 是 “正常 的 


(6. 2) 


5 . 
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8.7 YJ 是 


求 一 个 整数 8， 使 得 在 撕 骨 子 时 “连续 出 现 三 次 勾 点 的 连贯 ” 先 于 “长 为 8 的 非 么 点 的 连 
贯 ” 的 出 现 ， 而 出 现 的 概率 大 约 为 1/2. 

考虑 具有 3 个 可 能 结果 A,B,C 的 相互 独立 的 重复 试验 ，A,B,C 所 对 应 的 概率 分 别 为 p， 
qr(p 十 9 十 7 二 1)， 求 “接连 出 现 a 个 A 的 连贯 ”在 “接连 出 现 B8 个 B 的 连贯 ”之 前 的 
( 续 上 题 ). 求 长 为 a 的 A- 连贯 发 生 在 一 个 长 为 8 的 B- 连贯 或 在 一 个 长 为 7 的 C- 连贯 之 前 
的 概率 。 

在 伯 努 利 试验 序列 中 ， 令 A, 表示 在 第 2" 次 到 第 2"1! 次 试验 中 接连 出 现 n 次 成 功 的 事件 . 
如 果 p 宇 1/2， 则 有 无 穷 多 个 A， 发 生 的 概率 为 1; 如果 p<<1/2， 则 只 有 有 限 个 A, 发 生 的 
概率 为 1. 

AN, 为 在 第 n 次 试验 开始 的 成 功 连贯 的 长 度 〈( 即 是 ， 如 果 第 n 次 试验 的 结果 是 下 ， 则 
N, 二 0， 等 等 )， 证 明 


lim supToe =] (7.1) 


的 概率 为 1， 其 中 Log 表示 以 17z ARERR E. 

提示 : 考虑 一 个 长 度 超过 a Log n 的 成 功 连贯 在 第 n 次 试验 之 后 的 事件 A,。 对 a 二 1, 计 
算是 非常 顺利 的 .对 a 二 1， 考 虑 试验 次 数 的 一 个 子 序列 aa... Ha, 是 与 Logn 
非常 接近 的 整数 ， 

从 迭 对 数 法 则 我 们 可 以 推出 : BAREA n fË Si (n<k 二 17n) 全 是 正 的 概率 为 (注意: 
应 用 第 3 章 的 结果 ， 可 以 证 明 更 强 的 结论 ,) 

St (i) HIER RI EF RR, BS n 为 最 接近 MBA, WE 


Ltn) 
>, $n ) re (n, (7. 2) 
Wa. MREZA 1 地 只 有 有 限 个 nn 使 
S$, >np+ vnpqp (n) (7.3) 


RY. [注意 ; 不 妨 假设 $8(n) 二 10 vlog log n， 因 为 对 于 更 大 的 $8 (n), EMSAM AS 
对 和 付 这 个 问题 . J 
证 明 ? 级 数 (7.1) WEA 


1， 从 奈 依 曼 (D.J. Newman) 的 一 篇 稿件 中 提出 的 ， 

2 习题 7、 习题 8 合 在 一 起 证 明了 : AER (7.4 收敛 的 情形 下 ， 概 率 为 1 地 只 有 有 限 个 n 使 不 等 
式 (7.3) Rr. KAR., MWE (7.4) 发 散 ， 则 概率 为 1 地 有 无 穷 多 个 n 使 不 等 式 (7.3) AA. 
其 道 是 很 难 证 明 的， 参见 [56]， 其 中 对 于 任意 随机 变量 的 更 一 般 的 定理 都 证 明了 . 对 于 其 有 p= 
= 的 伯 努 利 试验 的 特殊 情形 ， 请 参见 [57]， 迭 对 数 法 则 是 从 $02) =A V 2 log log :的 特殊 情形 得 


出 的 . 
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5 Ein) opo (7.4) 
WON. [提示 : AHR n- 过 n 过 n, WARE, FFE Bn, — n~n (1 一 1/log r); 此 外 
(7.4) RE #(n)>2log log n 时 才能 收敛 , | 
9. 由 前 一 问题 证 明 : 概率 为 1 地 有 : 


lim supl S — /2 log log n] = 2 log log n _ 2, (7.5) 
log log log n 2 
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9.1 随机 变量 


按照 微 积分 教科 书 上 的 定义 ， 如 果 对 每 一 个 实数 zx 都 有 惟一 的 一 个 值 y 与 之 对 
应 ， 则 称 y 为 实 变 量 x 的 函数 ， 这 个 定义 可 以 推广 到 自 变量 x 不 是 实数 的 情形 ， 我 
们 可 以 称 两 点 间 之 距离 是 一 对 点 的 函数 ;三 角形 之 周 长 为 定义 在 三 角形 集合 上 的 函 


BG 序列 (a) 是 定义 在 所 有 正 整 数 上 的 函数 ， 二 项 式 系数 (% ) 为 数 对 (zx,k) (其 中 


第 二 个 数 为 非 负 整数 ) 的 函数 ， 同 样 ， 我 们 可 以 称 次 伯 努 利 试验 的 成 功 次 数 S, 
为 样本 空间 上 的 阻 数 ， 这 个 空间 由 2” 个 样本 点 组 成 ， 且 每 一 个 点 都 对 应 于 一 个 
数 Sn. 

定义 在 样本 空间 上 的 函数 就 称 为 随机 变量 ， 在 前 面 各 章 里 面 我 们 一 直 用 着 随机 
变量 的 概念 ， 只 是 没 用 这 个 术语 罢了 . 举 几 个 典型 例子 , 打 桥 牌 时 手中 爱 司 的 个 数 
是 随机 变量 ; 个 人 中 生日 相同 的 人 数 是 随机 变量 ; n 次 伯 努 利 试验 中 成 功 的 连贯 数 
是 随机 变量 ， 在 每 一 种 情形 都 有 惟一 的 一 个 规则 使 每 一 个 样本 点 与 一 个 数 X 联系 起 
来 ， 概率 的 古典 理论 主要 是 致力 于 赌 徒 的 赢得 的 研究 ， 而 财 徒 所 获 之 赢得 是 一 个 随 
机 变量 .事实 上 ， 每 一 个 随机 变量 都 可 以 解释 为 一 个 真实 的 或 者 假想 的 赌 徒 在 适当 
赌博 中 所 获 之 赢得 ， 在 物理 系统 中 扩散 时 质点 的 位 置 、 能 量 、 温 度 等 等 都 是 随机 变 
E, 但 是 它们 是 定义 在 非 离 散 的 样本 空间 中 ， 因 而 ， 对 于 它们 的 研究 将 放 在 以 后 . 
在 离散 的 样本 空间 的 情况 下 ， 我 们 真正 可 以 把 任 一 随机 变量 X 列表 表示 ， 即 用 某 种 
次 序 把 样本 空间 中 的 所 有 的 点 列 出 而 且 与 每 一 个 点 相对 应 的 X 的 值 也 都 列 出 来 . 

随机 变量 这 一 术语 有 些 模 糊 ， 而 称 之 为 随机 晃 数 则 更 合适 一 些 (其 自 变量 为 样 
本 空间 中 的 点 ， 亦 即 一 次 实验 的 结果 ). 

令 关 为 随机 变量 ，zm ,Xx; ,Xx3，,… 为 XX 所 取 之 值 (在 下 面 大 多 数 情形 中 ，x; 将 为 
整数 )， 所 有 的 那些 样本 点 ， 使 得 在 其 上 X 取 固定 值 zx, 者 构成 事件 : X= 二 x;， 它 的 概 
率 用 P{X=x)} 表 示 .， FI BK, 

P{X =2;} = fz) (= 1,2,) (1.1) 


1. 在 标准 的 数学 术语 里 ， 点 集 xi ,x2，… 称 为 x 的 值 域 . 不 幸 的 是 ， 统 计 的 文献 里 ， 把 X RA 
最 小 值 之 差 称 为 值 域 . 
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叫 作 随机 变量 X 的 《概率 ) 分 布 ， 显然 
fla) S0, > fa). (1. 2) 
如 采 应 用 这 些 术 语 ， 我 们 可 以 说 但 努 利 试验 中 的 成 功 次 数 S, 是 一 个 具有 概率 分 
Mibin p 的 随机 变量 ， 而 一 直到 第 一 次 成 功 出 现 〈 包 含 这 次 试验 ) 所 需 之 试验 
次 数 是 一 个 具有 概率 分 布 (g”p} 的 随机 变量 . 
现在 我 们 考虑 定义 在 同一 个 样本 空间 中 的 两 个 随机 变量 X ALY, HARZEN 
别 记 作 xi ,zz，… 和 Vio dos eet BERT by BY HE oP A l (f(x; YA ey. )}. 同时 满足 
X= 2, Y= y TARE Mg PSE, SERIE Pi XS aY Sy). 
FFI PRR : 
PiX =25Y = ye} = proy) Gk =1,2,0°) (1. 3) 
叫 作 X,Y 之 联合 概率 分 布 ， 最 好 是 用 如 表 9-1, 9-2 所 例 示 的 双重 记录 表 来 表示 它 . 
CER: 行 数 与 列 数 不 一 定 要 求 相等 ) 显 见 


pla; > Vp) = 0, 之 / 户 (z y) =|, C1. 4) 
日 对 每 一 个 固定 的 有 
PCL y) PCa; 92) p(x; Ys) Hee 一 Pix 一 x;} 一 fa); (1. 5) 
对 每 一 个 固定 的 上 有 
plxi ye) + pz Ved t+ play Ve) 十 一 PLY = yz} 一 gly). (1.6) 


换言之 ， 把 每 行 或 每 列 的 概率 加 起 来 ， 我 们 分 别 得 到 X 或 了 的 概率 分 布 ， 这 两 个 分 
布 叫 作 边缘 分 布 . 它们 可 以 在 表 上 显示 出 来 ， 像 表 9- 1,9- 2 中 那样 . “边缘 ”这 一 形 
容 词 是 从 双重 记录 表 的 外 和 貌 想 出 来 的 . 而 有 明 当 上 下 文中 两 个 随机 变 最 的 联合 分 布 及 它 
们 的 单个 (边缘 ) 分 布 同时 出 现时 ， 为 了 文体 上 的 清晰 ， 也 应 用 “边缘 ”这 一 形容 
词 以 示 区 别 . 严格 地 说 :“ 边 缘 ” 这 一 形容 词 总 是 多余 的 

联合 分 布 这 一 概念 完全 可 以 推广 到 多 于 两 个 随机 变量 的 系统 上 去 . 

例 (a) 把 3 个 球 随机 地 放 入 3 NEA. 我们 考虑 一 个 形式 上 由 表 9- 1 及 第 1 章 
1.2 节 例 (a) 所 定义 的 27 个 点 构成 的 样本 空间 ， 对 每 一 个 点 我 们 赋 以 概率 1/27. $ 
N 为 已 放 有 球 的 盒 的 数目 ， 令 X ABi te PMR PM, 1=1,2,3. 这 些 和 都 是 形象 
性 的 描述 . 形式 上 看 N 这 个 函数 在 第 1 一 3 个 样本 点 上 取 值 1; 在 第 4 一 21 Gin 
取 值 为 2; 在 第 22~27 个 样本 点 上 取 值 为 3. 因此 ， 的 概率 分 布 为 P{N=1}=1/9. 


1. 对 一 个 离散 的 随机 变量 XR. ABA MEX 之 所 能 取 值 x; 的 总 体 上 的 函数 六 zi)， 这 
个 术语 必须 要 与 “分 布 隙 数 ” 这 一 术语 区 别 开 来 . 分布 函 数 是 一 个 非 降 的 盟 数 ， 且 当 工 一 一 co 时 
CREO: 4 r—> co 时 ， 它 趋 于 1. 和 之 分 布 函数 玉 (z) 用 下 式 来 定义 : 

F(x) = PIXX zx) = Qf (i), 


T SI 


RARER- DREY dhr. KANE E A RAT ARAR HRM. & 
过 来 说 也 对 ， 在 这 一 卷 里 我 们 不 讨论 一 般 的 分 布 晒 数 . 
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P{N=2}= 2/3, P{N=3}=2/9. (N,X, ) 和 (X X) 的 联合 分 布 由 表 9- 1 和 表 9- 2 给 出 . 
表 9-1 lla) 中 (六 ,Xi ) 的 联合 分 布 


N 的 分 布 
2/27 0 1/9 
6/27 6/27 6/27 2/3 
0 6/27 0 2/9 
Xi 的 分 布 8/27 12/27 6/27 1/27 
E(N)=19/9, ECN2)=129/27, Var(N)=26/81, 
E(X,)=1, E( X?)=45/27, Var(X;)=2/3, 
E(NX\)=19/9, Cov(N,X1)=0. 


N 是 3 个 球 随机 地 放 人 三 个 盒 中 被 装 进 球 的 盒 的 个 数 ，X 是 第 一 个 盒 中 的 球 的 个 数 . 


表 9-2 例 (a) 中 (Xi,X;) 的 联合 分 布 


i 0 1 2 3 X: 的 分 布 
X? 


0 3/27 3/27 1/27 8/27 
] 6/27 3/27 12/27 
2 3/27 0 6/27 
3 0 0 1/27 
Xi 的 分 布 8/27 12/27 6/27 1/27 
E(X;)=1, E(X?)=45/27,， Var(X;)=2/3, 
ECX: X.)=2/3, Cov(X, ,X,) =~ 1/3. 


X: 是 3 个 球 随机 地 放 人 三 个 盒 中 第 i 个 盒 中 的 球 的 个 数 . 
(b) 多 项 分 布 ， 在 许多 场合 ， 三 个 随机 变量 的 联合 分 布 是 由 多 项 分 布 所 给 出 CS 
es 6. 9 P), 即 是 ， 


一 = _ 2, — Plo" pt pt A — pi pp) * ® 
PiX = Bro Xa = kX = kal = ki lk: tk, '(n—k, — k: — kz)! i 


(1.7) 
此 处 ky sk? 和 k, 是 满足 k, -tks +k, <n 的 非 负 整 数 . 例如 9 行 入 1 DE s X3 Sh Bi Rea 
-MAART HEAR. BLA, SH ROR, MERKS ot d. D 所 给 出 ， 


且 此 时 的 p= 二 ps 二 ps 二 1/6， 再 考虑 一 个 例子 .假定 从 一 个 由 几 个 子 总 体 (或 几 层 于 
总 体 ) 构成 的 总 体 中 无 放 回 地 抽出 一 个 样本 ， 如 果 OX, 表 此 样本 中 来 自 第 7 个 子 总 体 
的 元 素 的 个 数 ， 则 (X, X, X) 的 联合 分 布 也 是 形 如 《〈1.7) 的 多 项 分 布 . 
为 了 得 到 (XX) 的 (边缘 ) 分 布 ， 我 们 必须 在 〈1. 7) PEE k MA, 而 对 所 有 可 
能 的 RA, BIEX 处 二 0,…,n 一 刀 一 求 和 ， 应 用 二 项 定理 ， 我 们 得 到 三 项 分 布 : 
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|p t bh (1—p — p ) h, 
PiX, =k ,X =k} — SE pe fl Pe 
: ki 1k, i n— kı —k,)3 " 


再 把 上 式 对 已 一 0，…2 一 让 求 和 “原文 误 把 此 处 BAR. 
Xi 的 分 布 ， 它 就 是 p=p 的 二 项 分 布 . 

(c) 几 何 分 布 ， 考 虑 一 个 伯 努 利 试验 序列 ， 它 至 少 做 到 连续 出 现 两 识 成 功 所 需要 
的 次 数 为 止 ， 令 X 为 第 一 次 成 功 出 现 以 前 失败 出 现 的 次 数 ， 而 AX 是 第 一 次 成 功 到 
第 二 次 成 功 之 间 失 败 出 现 的 次 数 ，(X, ,X: ) 的 联合 分 布 由 下 式 给 出 : 

PiX =j,X, =k} = gp’, (1.9) 
(参见 第 6. 8 47.) 对 所 有 的 不 求 和 ， 得 到 X 的 分 布 一 一 几何 分 布 . 〈 此 例 说 明 : 随机 
变量 的 应 用 如 何 避 免 了 涉及 不 可 数 的 样本 空间 所 带 来 的 困难 . ) 

(d) 随 机 抽样 ， 把 例 Cb) 作 各 种 变化 得 到 了 奇妙 的 结果 . 现在 假定 试验 的 次 数 
事前 并 不 固定， 而 依赖 于 一 个 随机 实验 的 结果 如 下 : 恰巧 做 nn 次 试验 的 概率 为 e "4"/ 
n1， 换 句 话 说 ， 试 验 次 数 本 身 就 是 一 个 服从 泊 松 分 布 {e 4"/n!) 的 随机 变量 ， 给 定 试 
yn, BEX, 二 ,X= 二 有 ,Xs 二 k) 具 有 形 如 《1.7) Bia GR) 概率 ， 为 
了 得 到 此 事件 的 绝对 概率 ， 必 须 乘 e*X”/n! F ATD 之 右边 再 对 一 切 可 能 的 n 求 
和 ， 对 于 给 定 的 上 已 ， 当 然 需要 


(1. 8) 


nk, + ko +k, ° 
引进 差 > 作 新 的 求 和 指标 ， 得 到 了 
P{X, = ky + X: = kis A; = k3? 


—e4 (Ap, )" (Ap, )® (Ap; )* > XC — pı — pe — ps) 


ki lk: lks! r=0 r! c1. 10) 
我 们 知道 ，(1. 10) FAAR EA RA. Mit 1.10 可 重 与 为 : 
k, k, k, 
Pix, 一 Ri A> mer Ro »X3 -一 ko} 一 e” Ap)" ° es Cp)” r e% (Aps)” (l. Ll) 
kı! k; ! k; ! 


HAHI k Mk 求 和 消去 右边 的 第 二 个 和 第 三 个 因子 ， 得 知 X BSAA 
布 ， 奇 妙 的 事情 是 : 联合 分 布 是 它们 各 自分 布 的 乘积 ， 以 后 我 们 说 这 束 是 此 三 个 随 
机 变量 X, 相互 独立 . (此 例 本 质 上 是 第 6. 10 节 习 题 27 的 复述 . ) > 

应 用 1.3) 的 记号 ， 则 在 X=2, BERRET), HAYS y REN 
条 件 概 率 变 为 


(1. 12) 


文 就 对 X 的 每 一 个 值 给 出 了 一 个 数 ， 故 (1.12) 定义 了 XX 的 一 个 函数 ， 称 之 为 给 定 
XE, Y 了 的 (条件 ) 分 布 ， 并 用 P {Y= 二 y |X) KZ. AR 9-1 和 表 9- 2 中 一 看 便 
知 ， 一般 地 说 ， 条 件 概率 (1. 12) 与 g(y) 是 不 同 的 .这 表明 从 XX 的 值 我 们 可 以 对 
的 值 作 一 些 推 测 ， 反 过 来 说 也 对 ， 这 两 个 随机 变量 是 (随机 地 不 独立 的 . BY RX 
的 函数 ， 也 就 是 当 X 的 值 惟 一 决定 了 时，X 与 了 之 间 存 在 着 最 强度 的 依赖 性 ， 例 如 把 
一 个 硬币 扔 nn 次 , 令 久 和 YY 分 别 为 “正面 ”及 “反面 ”所 出 现 的 次 数 ， 则 Y 二 nn 一 X. 


PiY = y, | X = 2;} = PX +d a 
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AR, SY=XN, RONDWAXKHRY. 这 就 意味 着 ， 在 联合 分 布 中 每 一 行 除 
了 一 项 以 外 其 他 的 都 是 0. 另 一 方面 ， 如 果 对 一 切 组 合 zx; ,ys BA PCa oy) = f(a; 
By)» 则 事件 X=, 5 Y= y 是 相互 独立 的 ， 且 联 合 分 布 取 乘法 表 的 形式 . 这 时 我 
们 称 随机 变量 xX，Y 是 相互 独立 的 . 特别 地 联系 于 独立 的 试验 就 会 出 现 相互 独立 的 随 
HEE. Bin: 把 一 颗 仍 子 掷 两 次 其 所 得 之 点 数 是 相互 独立 的 随机 变量 .不同 性质 
的 一 个 例子 可 见 例 Cd). 

ERX MY 的 联合 分 布 决定 六 ,Y 的 分 布 ， 但 是 从 X.Y 的 边缘 分 布 不 能 算出 XX 
和 YY 的 联合 分 布 ， 如 果 两 个 随机 变量 X.Y 有 相同 的 分 布 ， 则 它们 可 能 相互 独立 也 可 
能 不 相互 独立 ， 例 如 在 表 9-2 中 的 两 个 随机 变量 X ,Xs: 不 是 相互 独立 的 然而 却 具有 
相同 的 分 布 . | | 

所 有 这 些 概念 都 可 以 应 用 到 多 于 两 个 随机 变量 的 情形 ， 我 们 扼要 地 重 述 为 如 下 
的 形式 定义 : 

定义 ”所谓 一 个 随机 变量 和 ， 即 是 定义 在 一 个 给 定 的 样本 空间 上 的 函数 ， 也 就 
是 对 每 一 个 样本 点 给 予 一 个 实数 与 之 对 应 ， 方 程 组 (1.1) LUT XH MB) 分 
布 ， 如 果 两 个 随机 变量 和 和 立定 义 在 同一 个 样本 空间 中 ， 则 其 联合 分 布 由 〈1.3) 所 
给 出 ， 它 给 出 了 和 和 了 取 一 切 组 合 (x;,y) 的 概率 .这 个 概念 可 以 推广 到 定义 在 同 
一 全 样本 空间 中 的 任意 有 限 个 随机 变量 XY, WHR. 如果 对 任意 一 组 值 a, 
yw) 都 有 

PIX = x,Y = yy, W = w} = 
= PX = zx}P{Y = y} PW = w}, (1.13) 

则 说 随机 变量 X,Y, W 是 相互 独立 的 ， 

在 第 5.4 节 中 我 们 曾经 定义 了 nn 次 相互 独立 试验 的 样本 空间 . 把 这 个 定义 与 
(1. 13) 比 较 ， 我们 看 到 ， 如 果 X 只 依赖 于 第 次 试验 的 结果 ， 则 随机 变量 Xs 
X, 是 相互 独立 的 ， 更 一 般 地 ， 如 果 随 机 变量 U 只 依赖 于 前 & 次 试验 的 结果 ， 而 万 一 
随机 变量 V 只 依赖 于 后 面 n 一 次 试验 的 结果 ， 则 U,V 是 相互 独立 的 〈 参 看 本 章 习 
题 39). | 

我 们 可 以 把 随机 变量 想像 为 样本 空间 中 的 点 的 一 种 标记 . 这 种 过 程 在 角子 的 例 
子 中 是 很 熟悉 的 ， 在 贷 子 上 每 一 面 都 用 数目 来 标明 ， 而 且 我 们 把 数目 说 成 是 单独 试 
验 的 可 能 结果 ， 在 传统 的 数学 术语 里 ， 我 们 说 随机 变量 是 由 原始 样本 空间 到 新 空间 
上 的 映 象 ， 这 个 新 空间 的 点 是 ra, ALA: 

当 { f(x;)) 满 足 条 件 (1.2)， 不 再 涉及 原 米 的 样本 空间 时 ， 我 们 就 可 以 说 一 个 随 
机 变量 X 以 概率 f(x) f(a) e RRMA 2 25°". 新 的 样本 空间 是 由 样本 点 Xl， 
zs，"…* 构 成 的 ， 指 定 一 个 概率 分 布 等 价 于 指定 一 个 点 为 实数 的 样本 空间 ， 谈 及 两 个 相 
互 独立 的 随机 变量 XY 具有 分 布 { f(x)},{g(Cyi)}) 等 价 于 谈 及 一 个 以 数 对 (Xj ,Yi) 为 
样本 点 的 样本 空间 ， 其 概率 由 PL y) } 二 (zj)g(yi) 来 确定 ， 同样 ， 对 一 组 nn 个 
随机 变量 ( 义 ,Y,…,W) 所 对 应 的 样本 空间 ， 我 们 可 以 取 n 维 空间 中 的 点 Cx, yte w) 
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所 构成 的 点 集 ， 而 其 中 的 概率 由 联合 分 布 所 给 出 ， 如 果 联 合 分 布 由 1.13) 所 给 出 ， 
则 说 随机 变量 是 相互 独立 的 . 

例 (OLA TRRSH MSM AR. 考虑 n 次 相互 独立 的 试验 ， 每 一 次 试验 都 
只 有 两 个 结果 : S 和 下 ,第 上 次 试验 出 现 S 的 概率 为 p,.， 出 现下 的 概率 为 gq, 二 1 一 pp，. 
WR 二 pp， 则 这 个 试验 就 变 为 伯 努 利 试验 ， 最 简单 的 描述 它 的 方法 是 把 S 和 下 分 别 
赋 以 值 1 和 0.， 因 此， 这 个 模型 完全 可 以 用 下 面 的 语言 来 描述 : 我 们 有 7 个 相互 独立 
的 随机 变量 Xe,X: 的 分 布 为 P(X 二 1) =p, P(X =0) 5g. 这 个 试验 可 以 理解 为 
“ 泊 松 试验 ” [参见 第 9. 5 节 例 Cb) 和 第 11.6 节 例 Cb) J. > 

显 见 ， 同 一 个 分 布 可 以 联系 不 同 的 样本 空间 . 如果 我 们 说 随机 变量 XX 各 以 1/2 
的 概率 取 值 1 和 0， 则 我 们 就 默认 了 一 个 由 0,1 两 点 所 构成 的 样本 空间 ， 然而， 我 们 
也 可 以 用 这 样 的 约定 来 定义 随机 变量 X: 把 一 个 硬币 扔 10 次 ， 若 第 10 次 出 现 正面 ， 
mW XO; 出 现 反 面 ， 则 取 l 这 时 X 就 定义 在 由 所 有 的 序列 HHT) 所 构成 的 
样本 空间 上 ， 这 个 样本 空间 有 2” 个 样本 点 . 

原则 上 ， 我 们 能 够 把 概率 论 限 制 在 由 随机 变量 的 概率 分 布 概念 所 确定 的 样本 空 
间 上 . 这样 做 就 避免 涉及 抽象 的 样本 空间 ， 也 避免 涉及 “试验 ”、“ 实 验 的 结果 ”等 
术语 ， 把 概率 论 简化 为 随机 变量 的 理论 使 得 分 析 知 识 立 刻 可 以 派 上 用 场 ， 而 且 也 简 
化 了 理论 的 诸多 方面 ， 然而， 它 也 有 美中不足 之 处 ， 那 就 是 使 得 概率 背景 明证 不 明 . 
随机 变量 的 概念 仍然 容易 含糊 地 被 当 作 “ 某 些 以 不 同 的 概率 取 不 同 的 值 的 东西 "， 但 
是 随机 变量 本 身 是 通常 的 基 数 ， 而 蚂 数 这 个 概念 并 不 是 概率 论 所 特有 的 

例 (DS X 为 一 个 随机 变量 ， 其 可 能 取 的 值 为 zz o HAIMRE SC), 
fla). 为 了 帮助 读者 想像 ， 可 以 构造 一 个 概念 性 的 实验 来 导出 X. 例如 把 轮 盘 
赌 具 的 轮 盘 分 成 弧 0 ,和 …， 其 长度 比 为 fa)? flan) i, SNR RA EM L 中 的 
某 一 点 停 下 来 ， 则 我 们 可 假想 某 一 个 赌 徒 获得 一 笔 款 项 z 〈 正 的 或 者 负 的 )， 于 是 
X 就 是 那个 赌 徒 所 获 的 利益 ， 在 nn 次 试验 中 所 获 之 利益 假定 为 4 个 具有 共同 分 布 
(f(z))} 的 相互 独立 的 随机 变量 ， 如 让 每 一 个 组 合 (zj, yi) 都 有 一 段 弧 与 之 对 应 ， 且 
这 时 想像 两 个 赌 徒 各 获 利 x;, y:， 便 得 到 具有 给 定 的 联合 分 布 {p(xj,yi)) 的 两 个 随 
机 变量 ， > 

若 X,Y,Z,… 为 定义 在 同一 个 样本 空间 上 的 随机 变量 ， 则 任 一 荐 数 F(X,Y， 
Z,…) 仍 然 是 一 个 随机 变量 .其 分 布 可 以 从 X,Y,Z,… 的 联合 分 布 得 出 ， 即 简单 地 把 
F(X,Y,Z,…) 这 些 取 同 一 值 时 的 所 有 的 组 合 (X,Y,Z,…) 的 概率 加 起 来 . 

Gl QER 9-2 所 表明 的 例子 中 ， 和 X 十 X; 是 一 个 随机 变量 ， 其 可 能 取 的 值 


为 0,1,2,3， 且 其 对 应 的 概率 为 去 , 访 , 节 ,各 ， 积 XXX 是 另 一 随机 变量 ， 其 可 能 取 


的 值 是 0,1,2, 其 相应 的 概率 为 到 ,27 ,六 


Ch) 我们 再 回 到 例 〈c) ， 并 考虑 X MX, 的 各 种 函数 ， 很 有 趣 的 情形 是 和 郴 数 
S=X +X. 为 了 得 到 PiS=v}, RNB 1.9) 中 (满足 7 十 k= 二 vv 的 一 切 ) 和 
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所 对 应 的 概率 加 起 来 ， 共 有 v 十 1 对 ， 而 且 在 此 特殊 情况 ， 所 有 的 都 具有 相同 的 概率 
gp’). AE, pi(S=vs=QtDedp’. Hix 6m (8.1) 的 一 个 特殊 情形 . 

Hie, SRUBX, 与 X; 中 较 小 的 一 个 ， 当 X; 宇 Xi 时 , U=X,, MA <x; 
时 U 一 X， 为 了 得 到 P{U==v}， 我 们 必需 对 1.9) 中 一 切 满足 下 列 条 件 的 (j,k) 
对 所 对 应 的 概率 加 起 来 ;“j 二 v 而 且 & 之 v” 或 者 “7 之 v 而 且 有 二 vw”. 这 使 我 们 得 到 两 
个 几何 级 数 ， 而 且 


PU =v) = GP OP = atop. (1. 14) 
此 处 v= 二 0,1,….， 
类 似 的 计算 可 得 : 
P(X, =X =v} = LL, v=0, £1, £2". (1. 15) 
> 


关于 两 两 独立 的 附注 .在 第 5. 3 节 例 〈(e) 中 ， 我 们 曾经 指出 了 一 个 有 趣 的 事实 ， 那 就 
有 是， 三 个 事件 中 两 两 独立 ， 但 这 三 个 事件 并 不 相互 独立 ， 为 了 陈述 有 关 随 机 变量 的 一 个 类 似 
的 结果 ， 我 们 考虑 一 个 最 简单 的 个 例 . 假定 一 个 样本 空间 由 a 个 样本 点 构成 ， 而 且 其 中 每 个 
样本 点 具有 概率 1/9， 其 中 6 个 点 是 1,2,3 的 6 种 排列 所 构成 ， 而 其 余 的 3 个 点 就 是 (1,1,1)， 
(2,2,2) 和 (3,3,3)， 再 引 人 三 个 随机 变量 X.X, X 如 下 : Xi 在 任 一 样本 点 上 的 数值 就 等 于 
此 样本 点 中 第 & 个 位 置 所 出 现 的 数值 .这些 随机 变量 所 可 能 取 的 值 都 是 1,2,3， 而 且 易 见 它 们 
的 分 布 及 联合 分 布 如 下 : 

P{X; = r} = 1/3,P{ X; = r,Xą = s} = 1/9 (1. 16) 

[这 与 第 5. 3 节 例 (o 的 结论 只 有 符号 上 的 差异 . ] 由 此 推出 这 三 个 随机 变量 是 两 两 独立 的 . 
男 一 方面 ，X3 AX 和 X, 惟一 决定 ， 所 以 X: , Xo , X, 并 不 相互 独立 . 

我 们 进而 定义 另外 三 个 随机 变量 (X ,X; , Xs )， 其 办 法 类 似 (Xi ,X,，X3)， 但 这 两 组 随 
机 变量 之 间 相 互 独立 .用 此 办 法 ， 我 们 定义 了 6 个 两 两 独立 的 满足 (1. 16) 的 随机 变量 ， 如 此 
继续 下 去 ， 我 们 得 到 了 一 个 随机 变量 序列 XX Xs BPABRAZAAR 1.16), 但 
它们 全 体 并 不 相互 独立 2: ， 在 第 5. 13 节 的 例 〈f) 中 我 们 还 要 回 过 来 讨论 这 一 问题 . 
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为 了 得 到 合理 的 简化 ， 常 常 需 要 用 一 些 “ 特 征 值 ”来 概要 地 描述 概率 分 布 ， 在 
第 2.7 节 中 的 关于 等 待 时 间 的 问题 中 曾经 涉及 过 的 中 位 数 就 是 一 个 例子 ， 再 如 ， 一 
项 分 布 的 中 心 项 也 是 ， 然 而， 在 这 些 特 征 值 中 ， 期 望 值 或 者 均值 是 非常 重要 的 一 个 , 
一 则 对 于 它 易于 作 分 析 处 理 ， 二 则 它 有 一 个 好 的 性 质 ， 即 抽样 的 稳定 性 而 使 得 统计 


1. 原著 在 此 误 把 op? 写成 q*p“. 译 者 注 
2 类 似 的 构造 ， 可 得 到 许多 例子 ， 其 中 没有 三 个 随机 变量 是 相互 独立 的 .在 随机 过 程 中 还 可 以 构造 许多 
不 同类 型 的 例子 ， 参 见 ，W. Feller, Ann. Math, Stat. Vol. 30(1959) pp, 1252—1253. 
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学 家 们 音 欢 用 它 ， 它 的 定义 来 自习 惯 上 的 平均 概念 .假定 在 由 家 庭 所 构成 的 总 体 中 ， 
A k NERKA n 个 ， 于 是 家 庭 的 总 数 为 2 一 mm 十 站 十 到 十 …， 而 小 孩 的 总 数 为 
m=n T2m 十 373 十 …。， 故 每 个 家 庭 的 小 孩 乎 均值 为 m/n 概率 与 频率 之 间 的 类 似 性 
启发 我 们 给 出 下 面 的 定义 : 

定义 令 义 为 一 个 随机 变量 ,， 其 可 能 取 的 值 为 Ziyrzz，…， 且 其 对 应 的 概率 为 
f(T) ,fCXi),"…*， 若 下 列 级 数 

E(X)= Daf (x) (2. 1) 
esti se, WER (2.1) 而 边 的 级 数 为 和 的 期 望 值 或 者 均值 这 时 我 们 说 X 有 有 限 
A. wRD| | Frm) 发 散 ， 则 说 和 没有 有 限 的 期 望 值 . 

把 概率 直观 地 想像 为 重复 实验 中 观察 到 的 频率 的 极限 ， 有 了 时 是 很 方便 的 . 这 于 
致 下 面 的 关于 期 望 的 直观 解释 . 把 一 实验 “在 同等 条 件 下 ”重复 做 ?次 ， 并 令 
X50 X EX 的 实际 观察 值 ， 对 充分 大 的 nm， 平均 数 《〈Xi 十 … 十 X.) /n 应 接近 
EC(X).， 大 数 定 律 给 此 含糊 的 直观 描述 以 精确 含义 . 

一 般 地 ， 最 常用 的 随机 变量 都 是 有 有 限 的 期 望 什 的， 否则 这 个 概念 就 没有 实际 
意义 了 ， 然 而 ， 与 物理 学 中 一 些 重要 的 重 现 问题 相 联系 的 随机 变量 就 没有 有 限 的 期 
望 值 . “均值 >、“ 平 均 数 ”、“ 数 学 期 望 >、“ 期 望 值 ” 这 些 术语 都 是 同义词 . 我们 有 时 
也 说 分 布 的 均值 来 表示 随机 变量 的 均值 . 在 数学 和 统计 学 中 ， 一 般 采用 EX) IX — IF 
号 来 表示 X 之 期 望 值 ， 而 在 物理 学 中 则 通常 用 入 ,(X),(X)7w 来 代 符 记号 E). 

我 们 希望 计算 例如 说 L 的 期 望 值 . 这 个 函数 是 一 个 新 的 随机 变量 ， 其 所 取 的 可 
能 值 为 zx?， 一 般 地 说 X =n RAE fo) TE fmt f(z). MAE 
ECX*) HE r? fx) tfa), RA ERR AT 2 0 ERA. fe 

E(X’)= 2 Áf), (2. 2) 

如 果 右 边 的 级 数 收 敛 的 话 . 

更 一 般 地 ， 我 们 用 同样 的 方法 可 得 出 : 

定理 1 任 一 函数 内 xz)， 定 义 一 个 新 的 随机 变量 OX). 如 果 下 X) 具 有 有 限期 望 
值 ， 则 

E($CX))= 2 $x) fae) (2. 3) 
此 处 的 级 数 绝对 收 化 当 且 仅 当 下 (8(X)) 存 在 ， 对 任 一 常数 a， 我 们 有 ECAX)= 
aE(X). 

如 果 几 个 随机 变量 Xi ,…,X,， 定义 在 同一 个 样本 空间 上 ， 则 它们 的 和 Xi 十 … 十 
X, 是 一 个 新 的 随机 变量 . 它 的 可 能 值 与 对 应 的 概率 可 以 从 XX, 的 联合 分 布 找 出 ， 从 而 
ECX, 十 … 十 X,) 可 以 算出 ， 下面 的 重要 定理 提供 了 一 个 简便 的 计算 方法 : 

定理 2” 如果 XXX, 都 是 具有 有 限期 望 值 的 随机 变量 ， 则 它们 的 和 的 期 
望 值 存 在 ， 且 其 和 的 期 望 值 就 年 于 期 望 值 的 和 : 

E(X, 十 … 十 X) = E(X) +o + ECX,). (2. 4) 

证 “只 需 对 两 个 随机 变量 XY 的 情形 来 证 明 (2.4) 就 够 了 . 应 用 1.3) Bie 
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号 ， 我 们 能 够 写 出 

E(X) + E(Y) = Dj XP 6X; 1H) + DIPTI) > (2.5) 
这 个 求 和 法 跑 遍 一 切 可 能 的 值 x , y。 (它们 不 需要 完全 不 同 )， 由 于 (2.5) 中 之 两 级 
数 绝 对 收敛 ， 故 其 和 可 重 排 次 序 ， 从 而 得 出 2 (zj 十 ye) p(x;,y)， 由 期 望 值 的 定义 


得 知 ， 这 就 是 XHY 之 期 望 值 ， 于 是 ， 我 们 完成 了 定理 的 证 明 . > 

显然 ， 对 于 随机 变量 的 积 ， 是 没有 与 上 述 定理 对 应 的 一 般 定 理 的 . 例如 五 CX’) 
一 般 地 并 不 等 于 五 (XY. mX ERDHA, W E(X) 二 7/2,， 但 
ECX2) 一 (1 十 4 十 9 十 16 十 25 十 36)7/6 王 91/6， 然 而 ， 对 相互 独立 的 随机 变量 来 说 ， 简 
” 单 的 乘法 规则 是 成 立 的 ， 这 就 是 下 面 的 定理 

定理 3 如 果 名,Y 是 具有 有 限期 望 的 相互 独立 的 随机 变量 ， 则 它们 的 积 也 是 具 
有 有 限期 望 值 的 随机 变量 ， 且 

ECXY) = ECXOE(Y). (2. 6) 

证 ATHA E (XY ， 我 们 将 对 每 一 个 可 能 值 zy, 乘 上 其 对 应 的 概率 ， 前 面 

已 经 指出 ， 在 定义 2.1) Pa 之 值 不 一 定 完全 不 同 ， 因 此 


EXV) = Dryf (aan) = | Daf )} | Donen ya) 
上 面 关 于 级 数 重 排 次 序 是 可 以 允许 的 ， 因 为 这 些 级 数 为 绝对 收 化. 这 就 证 明了 我 们 
的 定理 . > 


由 归纳 法 可 推出 ， 对 任意 有 限 个 相互 独立 的 随机 变量 ， 类 似 的 乘法 规则 还 是 成 
立 的 . 

为 了 方便 起 见 ， 我 们 给 出 条 件 概率 分 布 的 数学 期 望 的 概念 如 果 和 和 工 是 服从 
联合 分 布 (1. 3) 的 两 个 随机 变量 ,给 定义 后 Y 的 条 件 期 望 E(Y|X) 是 义 的 浮 数 ， 它 
在 X= x; 的 函数 值 由 下 和 式 : 
> yap Tj» Yt) 
nP AY = yi | X = 2;} -A 
ZX, MRAM, MANY 7 有 f(a, )>0. 

条 件 期 望 EC(Y|XX) 是 一 个 新 的 随机 变量 .要 计算 它 的 期 望 ， 就 需要 把 (2.8) K 
以 f(z;) 再 对 一 切 j 求 和 .其 结 采 如 下 : 

E(ECY | X)) = EW (2. 9) 


9. 3 ”例子 及 应 用 


(a) 二 项 分 布 ， 今 S, 是 在 n 次 成 功 概率 为 p 的 伯 努 利 试验 中 的 成 功 次 数 ， 我 们 知 
道 S 具有 二 项 分 布 {6C&;n,pP)}， 因 此 E(S,) 二 2khb(k;n,p) 二 np2b(k—1;n 一 1,p)， 
而 最 后 一 个 级 数 包含 了 对 应 于 n 一 1 的 二 项 分 布 的 一 切 项 ， 故 其 和 为 1 因此 二 项 分 


(2. 8) 
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布 的 均值 为 
ECS,) = np. (3. 1) 

不 需要 直接 计算 ， 采 用 一 种 常用 的 方便 方法 仍 可 得 出 同样 的 结果 . 令 Xi WHR 
次 试验 中 成 功 的 次 数 ， 则 这 个 随机 变量 只 取 值 0,1， 且 其 对 应 的 概率 为 p.g. 因此 
E(X,)=0+gqtl-+p=p. MA 

S, = X, +X, +e +X, (3. 2) 
BOM (2.4) 便 可 直接 得 出 (3. 1). 

(b) 泊 松 分 布 ， 如 果 久 具 有 泊 松 分 布 pP(k;4) 二 e M/k!1 (其 中 有 一 0,1,2,…)， 则 
E(X) 二 2kp(k;4) 二 422p(k 一 1;A)， 而 最 后 一 个 级 数 包含 了 泊 松 分 布 的 一 切 项 ， 故 其 
和 为 1. 因此 泊 松 分 布 {e M/k1) 之 均值 为 入. 

(Cc) 负 二 项 分 布 ， 令 外 为 具有 几何 分 布 P{X=k) 二 gqp(k 二 0,1,2,…) 的 随机 变 
量 ， 于 是 EE(X)==gp(1 十 2g 十 3 十 …)， 右 边 是 一 个 几何 级 数 的 导数 ， 所 以 F(X) 二 
gp(1 一 g) “二 gq/p， 在 第 6. 8 节 我 们 曾经 看 到 X 可 以 解释 为 一 个 伯 努 利 试验 序列 中 第 
一 次 成 功 以 前 失败 的 次 数 . 更 一 般 地 ， 我 们 研究 过 对 应 于 直到 第 ”次 成 功 出 现 为 止 的 
伯 努 利 试验 的 样本 空间 ， 当 r<n 时 , 令 XSEX, SX, 为 从 第 > 一 1 次 成 功 之 后 到 第 
7 成功 之 前 的 失败 次 数 . 于 是 每 一 个 X, PAA {op}, MA ECX,)=¢/p. 
MY, =X te +X, 是 第 > 次 成 功 以 前 失败 的 次 数 ， 换 句 话说，Y, 是 一 个 随机 变量 ， 
它 的 分 布 是 如 第 6 章 (8.1) 或 等 价 的 (8. 2) 所 定义 的 负 二 项 分 布 ， 由 此 推出 ， 这 个 
负 二 项 分 布 的 均值 为 rg/p， 这 也 可 以 用 直接 的 计算 来 验证 ， 显 然 ， 从 第 6 (8.2) 
推出 fCk;r,p) 二 rp qa f(k 一 1;r 十 1,p)， 而 这 个 分 布 {f 《8 一 1;r 十 1,p)) 的 诸 项 之 和 
为 1， 这 个 直接 的 计算 有 一 个 好 处 它 也 可 以 应 用 到 非 整 数 r 上 去 ， 男 一 方面 ， 第 一 
种 推导 不 需要 知道 Xt +X, 的 分 布 的 显示 表达 式 就 可 以 得 出 结 来 . 

Cd) 抽样 的 等 待 时 间 ， 从 县 有 N 个 不 同 元 素 的 总 体 中 ， 和 做 有 放 回 的 抽样 .由 于 重 
迭 性 ， 大 小 为 > 的 随机 样本 中 所 包含 的 不 同 的 元 素 一 般 地 小 于 -~ 个 . SR 
加 时 ， 新 元 素 进 入 样本 就 会 愈 来 愈 小 , 在 这 个 试验 中 有 一 个 很 有 趣 的 随机 变量 ， 那 就 
是 得 到 个 不 同 元 素 时 的 样本 大 小 S.. Ci, Bm N=365 个 可 能 的 生日 ， 这 里 5， 
就 表示 ; 当 样 本 中 包含 了 个 不 同 生 日 的 人 时 ， 所 抽出 来 的 人 的 数目 . 类 似 的 解释 可 
以 用 到 球 放 人 盒 中 的 例子 ， 赠 券 或 其 他 玩物 的 收集 者 对 我 们 的 问题 特别 感 兴 趣 ， 如 条 
他 得 赠 券 的 情况 可 以 比 作 随机 抽样 的 话 . D 

为 了 简化 语言 ， 我 们 称 一 次 抽取 是 成 功 的 ， 如 果 其 结果 使 样本 中 增加 了 一 个 新 
ZH. OS 是 一 直 抽 取 到 第 > 次 成 功 时 所 需 的 抽取 次 数 . 〈( 含 第 -次 成 功 那 一 次 抽 
Ru.) 邻 X, 二 Si 一 Si:， 则 XX, 1 是 从 第 次 成 功 到 第 上 十 1 次 成 功 之 间 失 败 的 次 数 . 
在 这 些 抽 取 中 ， 总 体 还 有 N 一 & 个 元 素 未 进入 样本 ， 因 此 Xi 一 1 是 具有 p 二 CN 一 &)/N 


1. 波 利 亚 用 不 同 的 方法 处 理 了 一 个 稍为 更 一 般 的 问题 . 讨论 优惠 券 收集 问题 的 文献 是 很 多 的 . 参见 本 
音 习 题 24，25,， 第 11.7 PUT, 第 2. 11 节 习 题 12. 
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的 伯 努 利 试 验 中 第 一 次 成 功 前 失败 的 次 数 ， 根 据 例 Cc), A ECX,)=14+¢/p=N/(N 
—k). MAW S,=14+X, + +X, 所 以 


-wnli dl 4t yy 
ES) =N tyty ate t. (3. 3) 


特别 地 ， 开 (CSw) 是 抽 完 总 体 中 一 切 不 同 元 素 所 需 的 抽取 次 数 的 期 望 ， 如 N=10, H 
E( So) =29. 29, ECS; 6.5…， 这 就 意味 着 ， 我 们 可 以 期 望 大 约 以 6 次 到 ?7 次 的 
”抽取 把 总 体 中 的 -一 半 元 素 抽 出 来 ， 而 剩 下 那 一 半 则 需要 23 次 以 上 抽取 才能 抽出 来 . 
为 了 得 到 3.3) AEA, Æ (N 一 k) 一 视 为 这 样 一 个 梯形 的 面积 : 其 底 是 以 
(CN 一 &) AUD MAR, REA r Ao. 把 此 面积 代 之 以 在 x 的 图 形 下 
之 面积 ， 得 到 : 
wd N+= 
E(S,) ~ N| ridr= N log———*. (3. 4) 
a N=r+5 
作为 一 个 应 用 ， 任 取 a 二 1， 考 虑 取得 这 样 的 样本 所 需 的 抽取 次 数 的 期 望 值 : 这 
种 样本 中 所 含 的 不 同 元 素 的 数目 与 总 体 中 不 同 元 素 的 数目 NN 之 比 为 a。 此 期 望 值 为 
E (S,)， 其 中 7 是 大 于 等 于 aN 的 最 小 整数 . 当 N 一 OW, GC. 中 期 望 误差 趋 于 
0， 从 而 所 要 求 的 期 望 值 与 N log (1 一 a) ! 之 极限 同 . 注意 : 所 有 这 些 结果 的 获得 ， 
都 不 需要 它 本 身 的 概率 分 布 ，[ 后 者 可 以 从 第 4 章 (2.3) 的 占 位 问题 中 容易 导出 . j 
(e) 一 全 估计 问题 .一 个 碗 中 装 有 六 个 标 有 号 数 从 1 到 N 的 球 . 令 X 为 采用 有 
放 回 的 随机 抽样 时 ,nn 次 抽取 中 所 抽出 来 的 最 大 的 号 数 . 事件 XR 意味 着 所 抽出 来 


的 个 号 数 中 每 一 个 都 小 于 等 于 &， 因 此 P{X<< 必 一 (这 ) ， 所 以 X 的 概率 分 布 由 


pe = P{X =k} = PiX<k}-PiX<k—-1} 
= {kk (k—1)"} N” (3.5) 
所 给 出 ， 故 有 


N 
E(X) = > kp: =N > M — (k= 1 — k1") 
k=] 


"(N 一 D4 }, (3. 6) 


对 于 相当 大 的 N, 最 后 个 和 近似 地 为 四 条 曲线 y= rx",XT 二 0,X 二 NN,y 二 0 所 围 成 之 
面积 ， 也 就 是 说 ， 它 等 于 NI/ tn 十 1)， 由 此 推出 ， 对 于 相当 大 的 N， 有 


n 
x — wf 
E(X) PTEE EN (3.7) 


如 果 一 个 城市 有 N=1000 辆 汽车 ， 观 察 一 个 n= 10 的 样本 ， 其 执照 牌 上 的 最 大 的 与 
码 〈 假 定 随机 性 ) 的 期 望 数 大 约 是 910， 应 用 统计 学 家 利用 由 样本 中 所 观察 到 的 最 大 
值 来 估计 未 知 的 真实 数目 N. 在 第 二 次 大 战 期 间 ， 曾 用 此 法 估计 敌人 的 生产 | 参看 本 
HY M 8,9). 
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(人 在 统计 检验 中 的 应 用 .此 例 说 明 期 望 的 实际 应 用 可 避免 概 率 分 布 的 繁复 
计算 . 

某 真菌 的 孢子 是 由 8 元 链 所 产生 的 ， 链 可 以 断裂 成 几 段 ， 一 直到 这 些 爷 子 生成 
包含 1 到 8 个 抱 子 的 衍生 物 . 有 理由 假设 连结 这 8 HATH 7 条 线 是 否 断 裂 是 相互 独 
立 的 ， 而 且 每 条 线 断 裂 的 概率 为 p， 在 这 些 假 设 下 ， 从 理论 上 看 ， 计算 “ 单 体 ”( 即 
1 元 链 )、“ 双 体 ”( 即 2 元 链 )…… 等 的 联合 分 布 是 可 能 的 ， 但是， 这 会 涉及 很 多 宛 
长 的 计算 ， 另 一 方面 ， 由 此 假设 对 实验 的 检验 发 现 ， 只 需 知道 “ 单 体 、“ 双 体 ”的 
期 望 值 就 够 了 ， 而 这 些 期 望 是 可 以 精确 算出 的 . 例如， 在 链 的 两 端的 的 子 变 成 单 体 
的 概率 是 p， 而 位 于 链 的 其 他 位 置 的 孢子 变 成 单 体 的 概率 是 卢 ， 因 此 ， 由 期 望 值 的 
加 法 定理 可 知 : 从 一 条 链 断 裂 后 所 产生 的 单 体 的 个 数 的 期 望 值 为 @ = 2p + 6p’. 类似 
的 推理 可 知 : 产生 的 双 体 的 个 数 的 期 望 值 ez 二 2gp 十 5gp*， 此 处 q=l—p. 类似 地 ， 
e 一 202 pt4q’ p ,es gq. 衍生 物 总 数 的 期 望 值 为 ei tenes tes == 1+7p. (这 不 需 
计算 就 可 显然 看 出 ， 因 为 断裂 的 期 望 值 是 7p， 而 每 断裂 一 次 就 增加 一 个 衍生 物 . ) 

从 总 数 为 N= 二 907 条 链 中 的 7251 个 孢子 的 实地 观察 值 (其 中 有 5 个 孢子 未 友 
现 )， 如 果 我 们 的 概率 模型 可 用 ， 就 近似 地 有 : 1+7pN=7251, 或 者 p=. 168. 
(这 个 推理 依赖 于 期 望 的 直观 意义 ， 它 已 被 大 数 定律 所 证 实 . ) 衍生 物 的 观察 值 fi 应 
该 接近 于 期 望 值 e. WR 9- 3 所 示 ， 不 相符 的 情况 没有 出 现 ， 因 此 没有 理由 否定 


我 们 的 模型 . > 
9-3 例 (f) 中 大 小 为 上 的 衍生 物 的 观察 值 f 和 期 望 值 N ex 
k fi N € k fi N€ 
1 490 458. 3 5 200 170. 6 
2 343 360. 8 6 134 131.7 
3 265 281. 8 7 72 101. 1 
4 199 219.7 g 272 250. 3 
94 FF 差 


令 X 为 一 个 具有 分 布 {7(z) )} 的 随机 变量 ， 且 令 r> 为 一 个 整数 ， 如 果 随 机 变 
EX 的 期 望 值 存在 ， 即 
EX = Daj f(a) (4. 1) 
ARE, MARCH X rE MRAR 4.1) 并 不 绝对 收敛 ， 则 说 和 的 ~ BE 
不 存在 ， 因 为 |X|”' 壹 |X|" 十 1， 故 + 阶 甜 存在 时 ，r 一 1 阶 给 也 存在 ， 从 而 前 面 的 各 
MERAH. 


1. 此 例 取 自考 克 斯 (D.R. Cox) 1961 年 在 伯 克 贝 克 Bireck) 学 院 的 受 职 演说 ， 可 参看 L58]. 
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在 一 般 理 论 中 ， 和 矩 有 重要 的 意义 ， 然 而 在 现在 这 一 卷 书 里 ， 我 们 仅仅 用 到 二 阶 
fo. 如 果 二 阶 矩 存在 ， 当 然 均值 
u= EX) (4. 2) 
也 存在 ， 于 是 ， 我 们 很 自然 地 引进 随机 变量 与 其 均值 之 差 X 一 4 来 代替 随机 变量 XX . 
Ary? LH), Be ECX2) 存 在 时 X—p 的 二 阶 矩 也 存在 .我 们 有 
EUX =W) = >) Ca} — Quer; +?) fz). (4.3) 


HAWAAH=T AMA, FARES EX) — EX) +p = EX), 

定义 EX ALAIMME(X) AMEE, BASE (X) 为 其 均值 .我 们 
定义 数目 

Var(X) = EC X- wW) = ECX)—p (4. 4) 

为 六 的 方差 、 其 正 的 平方 根 AAO AH X 的 标准 差 . 

为 简单 记 ， 我 们 常常 说 一 个 分 布 的 方差 ， 而 不 说 及 随机 变量 . “ 离 差 ”是 现在 通 
常 采 用 的 术语 “方差 ”的 同义词 . 

例 DE XZA 的 概率 取 值 土 c， 则 Var(X S=. 

OF X 为 一 个 均匀 般 子 上 面 所 刻 的 点 数 ， 则 Var(X) = =? +2? + +62) — 


(本 站 一 35112， 


(c) 对 于 泊 松 分 布 p(k; 和 ) 来 说 ， 其 均值 为 * [参看 第 3 PA Cb) |, ARTA 
DR? plk; A) — R =A DRP(R—- 1A) A HAD k1p k1; D FAZ pkl; Aa) = 
Pti =A. FERXTMIF YS. HASHES. 

(d) 对 二 项 分 布 来 说 [参看 第 3 节 例 (a)]， 经 过 类 似 的 计算 得 出 其 方差 为 

Sk:blk;n,p)— (np) —np2kb(k—1;n—1,p)— (np) 
~np{(n—1)p+1}— (np) =npg. > 
方差 这 一 概念 的 用 处 是 逐渐 地 会 显现 出 来 的 ， 特 别 是 与 和 极限 定理 (第 10 章 ) 
联系 起 来 的 时 候 . 在 这 里 我 们 会 看 到 : 方差 是 松散 度 的 粗略 度量 . HEE, MR 
Var(X) 二 如 (Cz, 一 ?f(z) 较 小 ， 则 和 中 每 一 项 都 较 小 ， 从 而 对 应 于 “使 |z 一 py| 较 
大 的 ”Zz 的 概率 f(x) 较 小 .换言之 ,在 方差 小 的 时 候 ，X 与 4 之 大 偏差 是 不 概 然 
的 ， 反 过 来 ， 方 差 大 时 ， 则 X 的 可 能 值 不 会 完全 落 在 其 均值 附近 . 

读者 们 可 以 用 下 面 的 力学 解释 来 帮助 了 解 . 假定 一 个 单位 的 质量 分 布 在 x 轴 上 ， 使 得 在 
Aa, 集中 了 质量 f (y), TESE p 就 是 重心 的 横 坐 标 ， 方 差 就 是 转动 惯量 显然 ， 不 同 的 
质量 分 布 可 以 有 相同 的 重心 和 相同 的 转动 惯量 ， 然 而 众所周知 ， 很 多 重要 的 力学 性 质 可 以 用 
这 两 个 量 来 描述 . 

如 果 X 代表 一 个 可 以 测量 的 量 ， 例 如 长 度 或 者 温度 ， 则 其 数值 依赖 于 原点 及 讽 
量 单位 ,而 原点 与 单位 的 改变 就 意味 着 把 X 变化 到 一 个 新 的 变量 oX 十 6， 此 处 < 和 4 
都 是 常数 . 显然 ，Var(X 十 b) 二 Var(X)， 因 而 
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Var(aX +b) = a’ Var(X). (4.5) 
原点 及 测量 单位 的 选取 有 很 大 的 任意 性 . 不 过 通常 选取 均值 作 原 点 ， 标 准 差 作 测量 
的 单位 则 是 较 方便 的 .我们 在 第 7. 3 节 中 已 经 这 样 作 了 ， 当 时 我 们 引进 了 正则 化 成 功 
次 数 S =(S,—np)/ /npq. 一 般 地 ， 如 果 X 有 均值 w 与 方差 ss 〈o>0)， 则 X-u 的 
均值 为 0, 方差 为 oo ， 因 此 随机 变量 

X* = (X— 1)/o, (s > 0) (4. 6) 
之 均值 为 0 方差 为 ]， 它 叫 作 六 的 正则 化 随机 交 量 ， 在 物理 学 家 的 语言 中 ， 从 XX 变 
到 X 解释 为 引进 无 量 纲 的 量 . 
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设 X 与 Y 为 同一 样本 空间 中 的 两 个 随机 变量 ， 则 X 十 Y 与 XY 仍然 是 随机 变量 . 
它们 的 分 布 可 以 从 六 和 YY 的 联合 分 布 经 过 一 些 简 单 的 运算 而 得 出 ， 我 们 现在 的 目的 
是 计算 Var(X 十 Y)， 为 此 我 们 引进 协 方差 的 概念 . 它 将 在 第 8 节 里 详细 地 进行 分 析 . 
如 果 义 与 Y 的 联合 分 布 为 {plzj,yi)}， 则 XY 的 期 望 值 由 

ECXY) = Sexy Cr, yr) (5.1) 
所 给 出 ， 当 然 ， 假 定 右 边 的 级 数 是 绝对 收敛 的 ， 由 于 | zye| 委 ( 蕊 十 炎 )X2， 故 当 
E(X),E(Y’) 存 在 时 ，E(X 让 也 存在 .这 时 ， 期 望 值 
ux = E(X), u, = EY) (5. 2) 
当然 也 存在 . 而 且 X-u Yu ZIER O STEM. HA2PH MBA 
则 ， 有 
ECX — um) (¥ — py) = EQXY) — EQ) — p, E(X) F pty (5.3) 
= ECXY) — pap: 

定义 ”我们 定义 

Cov(X,Y) = ECX — um) Y — py) = ECXY) 一 Ap (5. 4) 
AX, Y 的 协 方差 ， 当 和 和 了 有 有 限 的 方差 时 ， 这 个 定义 是 有 意义 的 . 

从 第 2 节 中 我 们 知道 ， 对 相互 独立 的 随机 变量 来 说 ， 有 ECAXY=ECOEY), 
因此 由 65.4), 有 

定理 1 wR X,Y 相互 独立 ， 则 Cov(X,Y)=0. 

注意 ”其 送 不 真 ， 例 如， 阅 看 表 9-1 便 知 ， 那 两 个 随机 变量 是 不 独立 的 ， 但 是 
它们 的 协 方差 为 0. 在 第 8 节 我 们 还 要 回 过 来 讨论 这 一 点 . 下 面 的 定理 是 很 重要 的 ， 
对 独立 的 随机 变量 来 说 ， 加 法 规则 〈5. 6) 仍然 成 立 . 

定理 2 PX, X, 为 具有 有 限 方差 gj,……o 的 7 个 随机 变量 ， 且 令 > 二 
X, 十 … 十 X, ， 则 


Var(S,) = >å +2’) Cov(X, X,), (5.5) 
k=] Jak 
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此 处 最 后 一 个 求 和 包括 了 (| aX, XB I<. 
特别 地 ， 如 果 X, 相互 独立 ， 则 给 出 了 加 法 规则 : 


| Var(S,) =o toa teete. (5.6) 
证 a= E (X), m=m tet, =E (S,), M S,—m,= >) (Xi 一 J4) H 
(S,—m,)? = >) CX, — pa) £257 (X; — u) (Xi — u) (5. 7) 

把 〈5.7) 两 边 取 期 望 值 ， 然 后 应 用 加 法 规则 即 可 得 出 (5. 5). > 


Bl DRT bkin p)}. FERS TH Ca 中 ，X 是 相互 独立 的 .我 们 有 
E(Xi)=0° e qt’ + p=p,E(X) =p, Alt, =p- p =p 且 从 (5.6) 得 知 二 项 
分 布 之 方差 为 npg. 在 第 4 市 例 (d) 中 ， 用 直接 计算 的 办 法 已 经 得 出 过 同样 的 结 末 ， 

(b) 具 有 可 变 概 率 的 伯 努 利 试验 . S XXt X, 为 相互 独立 的 随机 变量 ，X， 
分 别 以 概率 pi Mg =1— p 取 值 1 和 0， 于 是 ECX.) = pes Var(X,) = pi — Pi = Pade. 
再 令 S,=X te +X, KM 5.6) 我 们 得 到 


Var(S,) -一 >, Bide: (5. 8) 
k=} 


如 第 1 节 例 (e) 一 样 ， 随 机 变量 S, 可 以 解释 为 次 独立 的 试验 成 功 的 次 数 ， 每 
一 次 试验 的 结果 或 者 成 功 或 者 失败 . 于 是 p= 二 (pi 十 …p,)/n 是 其 成 功 的 平均 概率 ， 很 
自然 地 ， 我 们 要 把 现在 的 情形 和 具有 固定 成 功 概率 户 的 伯 努 利 试验 比较 . 这 样 一 种 
比较 可 以 得 出 一 种 很 好 的 结果 . 我 们 可 以 把 (5. 8) BW Var(S,=np— Up. 其 次 ， 
容易 看 出 (用 初等 的 计算 或 者 简单 的 归纳 法 )， 在 全 部 满足 pi 二 np 的 组 (p) P, 
当 所 有 的 p ERASER, Dp 达到 它 的 最 小 值 . 由 此 推出 ， 如 果 成 功 的 平均 概率 p 
lve. Wi p&p: = Spr pt, Var(9,) 达 到 最 大 值 . 因此 ， 我 们 得 到 了 一 个 很 
好 的 结果 ， pi 的 可 变性 或 者 缺少 不 一 致 性 减 小 了 其 随机 起 伏 性 !〈 用 方差 来 衡量 的 ). 
例如 ， 一 个 城市 中 一 年 的 火灾 可 以 考虑 为 一 个 随机 变量 ， 对 于 一 个 给 定 的 平均 数 ， 
如 果 每 一 户 发 生火 灾 的 概率 都 一 样 ， 则 火灾 的 变化 性 达到 最 大 . 给 定 n PPLE 
质量 平均 p， 如 果 全 部 机 器 都 一 样 ， 则 产品 最 不 一 致 . (把 它 应 用 到 近代 教育 中 去 是 
明显 的 但 是 没有 什么 用 处 . ) 

(c) 合 牌 ， 一 副 具 有 nn 张 标 有 号 数 的 纸牌 随机 地 排列 ， 于 是 n! 种 排列 都 是 等 概 
率 的 .相合 〈 牌 在 它们 自然 的 位 置 ) 的 数目 是 一 个 取 值 为 0,1,…,n 的 随机 变量 S，， 
其 概率 分 布 已 经 在 第 4 章 第 4 节 中 推导 过 .， 由 它 的 分 布 我 们 可 以 得 出 S, 之 均值 与 方 
差 . 不 过 下 面 的 方法 较 简 单 而 且 很 有 局 发 性 . 

我 们 定义 一 个 随机 变量 X ， 其 所 取 的 值 为 1 或 0， 当 号 码 为 & 的 牌 在 第 & 个 位 置 
时 X, 为 1， 反 之 X, 为 0， 于 是 S, 二 Xi 十 … 十 XX,。 每 一 张 牌 都 以 概率 1/n BWER k 
个 位 置 ， 故 P(X, =1)=1/n fi P{(X,=0}=(n—-1)/n, Alt E(X =1/n. 由 此 可 知 


L 更 强 的 结果 参看 [59]， 关 于 泊 松 分 布 的 逼近 ， 请 参见 第 1. 6 节 例 b). 
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F(S,) 一 1， 亦 即 一 副 纸牌 中 相合 数目 的 均值 为 1， 为 了 计算 其 方差 ， 我 们 首先 计算 
X; AN Ty o: 


=- (+) =") (5.9) 


n 
其 次 我 们 计算 ECX,X,). REXX: 或 者 为 0 或 者 为 1， 且 只 有 当 号 码 为 7 的 牌 在 第 ; 
个 位 置 ， 号码 为 上 的 牌 在 第 个 位 置 时 ，X;X TAL 这 个 事件 的 概率 为 
l/n(n—-1). $ 


_ l 
E XGA) on (n—1)’ 
Cov X; X )=— fi _ (5. 10) 
2 nnl) on on’ (n—- 1) | 
Mile A 
nail n 1 o 
Var(S,) = n= +2(0 m= L (5.11) 


从 上 面 我 们 看 到 了 相合 数目 的 均值 与 方差 都 等 于 1， 这 个 结果 可 以 应 用 到 第 4 章 
第 4 节 中 所 讨论 的 牌 的 猜测 问题 上 去 . 那里 我 们 考虑 三 种 猜测 的 方法 ， 其 中 之 一 融 
对 应 于 合 牌 . 第 二 种 可 描述 为 概率 p=1/n 的 n RASA Awa. 在 这 种 情形 下 ， 
猜 对 的 期 望 数 为 np=1, FAN npq=(n—-1)/n. 上述 两 种 情形 中 期 望 数 都 是 一 样 的 . 
但 是 第 一 种 方法 却 具 有 较 大 的 方差 ， 这 就 表示 围绕 着 均值 有 较 大 的 偶然 起 伏 ， 从 而 
游戏 可 能 较为 紧张 些 . (对 于 较 复 杂 的 纸牌 来 说 这 两 种 方差 之 间 的 差别 稍为 大 一 点 . 
但 并 不 怎么 大 . ) 对 最 后 一 个 猜测 模型 来 说 ， 猜 的 人 保持 呼唤 同一 张 牌 ， 猜 对 次 数 永 
远 是 1， 而 偶然 性 的 起 伏 完全 消失 (方差 为 0)， 我 们 看 到 ， 呼 唤 的 策略 不 会 影响 猜 对 
的 期 望 数 .但 是 它 对 偶然 性 的 起 伏 的 大 小 却 有 一 些 影响 . 

(d) 无 放 回 的 抽样 ， 假 定 一 个 总 体 由 5 个 黑 元 素 与 g 个 绿 元 素 组 成 ， 而 且 假 定 由 
其 中 抽取 一 个 大 小 为 > 的 随机 样本 〈 不 可 能 重 迭 )， 样 本 中 黑 元 素 的 个 数 S, 是 一 个 随 
机 变量 ， 它 具有 超 几 何 分 布 (第 2.6 节 ). 均值 和 方差 可 以 由 直接 的 计算 而 得 ， 但 是 
下 面 的 方法 是 较 好 的 ， 定义 一 个 只 取 值 1 或 者 0 的 随机 变量 X ， 当 样本 中 第 k AI 
素 是 黑 元 素 时 XX, 为 1 (<r), WU X, HO. 由 于 对 称 性 的 原故 ，X 一 1 的 概率 为 6/ 
(十 g)， 从 而 


_ _.6 __ og 
ECX,) bg? vary) +e 


其 次 ， 如 果 j 了 关上 &， 则 当 样 本 中 第 j 个 和 第 个 元 素 都 是 黑 时 ，X,X 二 1， 否 则 
X,X,=0. XX, 一 1 的 概率 为 5 (6 一 1) / (6 十 g) (6 十 g 一 1)， 因 此 
b(b—1) 


(5. 12) 


EAD = GF GF D 
o o OE 
Cov(X,; X;) (b+g): (b+g—1). CD. 13) 


所 以 
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_ b _ rw ral 
ECS) = 5. Var(S,) = GE (1 ste} (5.14) 
在 有 放 回 的 抽样 中 ,我们 仍 有 同样 的 均值 ,但 其 方差 称 为 大 一 点 ， 其 方差 为 
robg/(b+g)*. > 


9.6 切 比 雪夫 不 等 式 


曾经 指出 过 ， 小 的 方 益 表示 与 均值 的 大 偏差 是 不 概 然 的 . 这 一 事实 由 切 比 雪夫 
不 等 式 而 变 得 更 精确 了 .这 个 不 等 式 是 一 个 很 有 用 而 且 很 方便 的 工具 ， 它 预先 假定 
=r ABA EE. 
定理 ”对 任何 上 20， 有 
PI X| >H St EQ). (6.1) 
特别 地 ， 若 五 (X) =u, W 
P{| X— ul> t) [C Var(X). (6. 2) 
证 明 第 二 个 不 等 式 可 由 第 一 个 不 等 式 通过 将 X RRA Xaa. AAR A 
记号 可 得 o 


POUXI> b= X fa L A fa). (6. 3) 
|x | zat |x, |e 
式 子 和 式 小 于 等 于 ECX)* ，(6. 1) 得 证 . > 


把 切 比 雪夫 不 等 式 作为 一 个 理论 工具 比 作为 估计 的 实际 方法 要 恰当 一 些 ， 其 重 
要 性 在 于 它 的 应 用 普遍 性 ， 但 是 不 能 希望 很 普遍 的 命题 会 对 一 些 个 别 情况 给 了 深刻 
的 结果 . 

例 〈a) 令 X 为 掷 一 颗 均匀 的 蜗 子 所 得 到 的 点 数 ， 则 p 一 7/2, 叶 一 35/12[ 参 见 第 4 
节 例 (b)j. X 与 w 之 最 大 偏差 为 2. 5<z3o/2. 1X 一 /| 大 于 这 个 偏差 的 概率 为 0， 然而 切 
比 雪夫 不 等 式 仅仅 断定 这 个 概率 少 于 0. 47. 

(b) 对 二 项 分 布 {6(k;n,p)) 来 说 ,， RNA ps 一 zz 到 一 atpd [参见 第 5 WH a]. 
对 于 大 的 n 我 们 知道 | 

PH S, — np |> x vnpg) 1— Rar) ARO r). (6. 4) 
然而 切 比 雪夫 不 等 式 只 指出 ; 左边 小 于 1/2. BR, RRS (6.4) 来 说 是 一 个 多 么 
粗糙 的 估计 . 


"9.7 PRAXI RA SR 
作为 更 精湛 的 方法 的 一 个 例子 ， 我 们 证 明 ， 


l. P. L. Chebyshev (HeG6punes, 1821~1894). 
* 本 节 处 理 特殊 主题 ， 初 读者 可 路 去 . 
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令 XI，…AX， 为 相互 独立 的 ， 具 有 期 望 值 1 一 E(Xi) 及 方差 所 的 随机 变量 ， 令 
S, = X te + X, (7.1) 


m, =E(S,) =m t+" p, (7.2) 
s = Var(S,)=0 te +o. 
对 每 一 个 1>0， 下 面 n ARER: 
| Se— m, |< tse k=1,2,.,n (7. 3) 
同时 成 立 的 概率 至 少 为 1 一 上 
| 当 n 二 1 时 ， 这 个 定理 化 为 切 比 雪夫 不 等 式 ， 对 n>1 的 情形 ， 切 比 雪夫 不 等 式 只 
对 每 个 单个 的 关系 |S, 一 m1 二 ts, 的 概率 给 出 了 一 样 的 界 .， 故 科 尔 英 臣 罗 夫 不 等 式 是 
比较 强 的 . 
证 ”我们 要 合计 不 等 式 07.3) 中 有 一 个 不 成 立 的 概率 r. EME: er. 
定义 nn 个 随机 变量 Y, OF. wR 
| S,—m, | ts, (7.4) 
但 
(Siom | <ts, XF R=1,2,°,u—-1, (7.5) 
则 YY, 二 1， 在 其 他 一 切 样 本 点 上 ，Y, 二 0， 邑 是 说 ，Y, 在 那些 使 得 不 等 式 7.3) 中 
第 个 不 等 式 为 首次 不 成 立 的 样本 点 上 为 1， 于 是 在 任 一 特定 的 样本 点 上 , BY, 中 
最 多 只 有 一 个 为 1， 从 而 Yi +Y: +e +Y, 只 能 取 值 0 或 者 1， 当 且 仅 当 《〈7. 3) 中 的 
不 等 式 至 少 有 一 个 不 成 立时 它 才 为 1， 因此 
x= PLY, 十 … 十 了 = 1). (7. 6) 
因为 Yi 十 … 十 冯 HOMBH1, MALY, <1. MARAC, m) 以 后 再 取 期 
望 值 ， 我 们 得 到 


SEY, S, —m,)?) S È. (7.7) 
k=] 
为 了 计算 左边 每 一 项 的 值 ， 我 们 令 
U, = (S,—m,) — (S,—m) = >) (X, — m). (7. 8) 
v= kt] 


于 是 
EY, CS, —m,)°) = ECY; CS, — m) ) + 2ECY,U, CS, — m)) + ECYU:). (7.9) 
然而 U, RAT Xiti ，… Xano M Yro S 只 依赖 于 Xisto Xe mM U; 与 Y, (S, — m ) AR 
互 独立 . Aig ECY,U,(S,—m)) =E(Y, (S,—m, DEU,) =0 LAA EU.) =0]. 故 由 
(7.9) 推出 
ECY, (S, — m,)°) & EY, (S: — m) ). (7. 10) 
但 是 只 有 当 | S,—m,| ts, 时 ， Y0. W YS mY r sY AMRA (7.7) 和 
(7.10) 我 们 得 出 
FECOY 十 十 YY,). (7. 11) 
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AA Y + +Y, 或 者 为 0 或 者 为 1， 故 右边 的 那 一 个 期 望 值 等 于 (7.6) 中 所 定义 的 
概率 x， 因 此 rési. 这 就 完成 了 我 们 的 证 明 . > 


"9.8 相关 系数 


S X,Y 为 任意 两 个 具有 均值 nowy 和 正方 差 xz,o 的 随机 变量 ， 我 们 引进 如 
(4.6) 中 所 定义 的 对 应 的 正则 化 随机 变 最 X,Y* ， 它 们 的 协 方差 称 为 X,Y 的 相关 系 
数 ， 且 以 符号 AX YAR. 利用 (5.4)， 得 到 

Cov(X,Y) 


X,Y) — Cov( X” Y” ) — (8. 1) 
O y 


显然 ， 相 关系 数 是 不 依赖 于 原点 与 测量 单位 的 ， 也 就 是 说 ， 对 于 任意 常数 w， 
ap sb CHP a,>0,a,>0) 都 有 pla, Xd, a, Yh) =pCX-Y). 

使 用 相关 系数 ， 无 非 是 给 协 方差 的 书写 来 一 个 花样 里 了 ! .很 不 幸 ， 相 关系 数 并 
没有 “相关 ”这 个 词 儿 所 上 暗示 的 涵义 ， 从 第 5 节 我 们 知道 ， 当 X,Y 相互 独立 时 ， 
o( 义 ,Y) = 二 0， 但 是 应 该 知道 ， 其 逆 命 题 是 不 成 立 的 .事实 上 ， 甚 至 当 Y》 是 XX 的 肖 数 
时 ， 相 关系 数 p(X,Y) 也 可 能 为 0. 

Gl (aS XSW 1/4 OER +1, +2, HO Y=X*. KADEA p(—-1,D 


=p. D=p2.4)=p(—2,.4) =>. BURY MX 有 直接 的 函数 依赖 性 ， 可 是 由 对 称 


性 的 缘故 仍然 有 po(X,Y) 一 0. 

(b) 令 U,V 为 相互 独立 的 具有 共同 分 布 的 随机 变量 ， 且 令 X=UtTV,Y=U-—V. 
BECKY) =E(U?)—E(V*),ECY) =0, kt Cov(X,Y)=0, Milf oC X,Y) =0, Plan 
X.Y OWS SCS, WX, YRAANASRRAAN AE 
数 ， 所 以 X,Y 是 非 相 互 独立 的 . 

由 此 推出 ， 相 关系 数 并 不 表示 X 和 了 之 间 的 依赖 性 的 一 般 度 量 ， 然 而 p(X,Y) 与 
X 和 YY 的 线性 依赖 性 是 有 关 的 . 

定理 RMA XY) Sl, ME AX, Y)=tl, 仅 当 存在 和 常数 a Fbi Y= 
a 义 十 b 恒 对 或 稍 弱 一 点 ， 除 去 处 的 一 个 零 概率 集 此 式 成 立 才 行 . 

证 S X.Y 为 正则 化 随机 变量 ， 则 

Var(X* +Y* )=Var(X* )+2Cov(X" ,Y* )+Var(Y" ) 
=2(14p(X,Y)). (8. 2) 
左边 不 可 能 为 负 ， 所 以 oC X,Y) <1. 大 oC(X,Y)=1, 则 必 有 Var(XX* —Y*)=0, 3X 
意味 差 X* 一 Y* ARERR MAL BNE X* 一 Y = BR. MYR oXt+ RR, Wb a= 
o,/o.， 用 同样 推理 可 以 证 明 op X.Y) = —1 的 情形 . 


* 本 节 处 理 特殊 主题 ， 初 读者 可 略 去 . 
1. 物理 学 家 把 相关 系数 定义 作 “ 无 因 次 的 协 方差. 
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10. 


11. 


99 AY al 


7 个 球 随机 地 分 布 在 7 个 盒 中 . OX 为 恰巧 包含 ;个 球 的 盒 数 ， 应 用 第 2.5 节 中 所 列 出 
的 概率 ， A(X, XO HRAST., 

AA MIYOMR. S X AS Ra To ee ae, m Y AART P A SA A 
的 最 大 者 . (2 写 出 (X,Y) 的 联合 分 布 . bD 求 出 均值 、 方 差 、 协 方差 . 

把 一 个 硬币 护 5 次 ， 令 义 ,Y,Z 分 别 为 正面 出 现 的 次 数 、 正 面 连贯 的 个 数 和 最 长 的 正面 连 
贯 的 长 度 ， 试 把 32 个 样本 点 和 其 对 应 的 X,Y,Z 的 值 在 一 起 列 一 个 表 ， 而 且 用 简单 计算 
导出 (X.Y),(X,Z),(7,2) 之 联合 分 布 及 XTY,XY 之 分 布 ， 求 出 这 些 随机 变量 之 均值 ， 
方差 ， 协 方差 . 

设 随 机 变量 X.Y AZ 相互 独立 而 且 具 有 共同 的 几何 分 布 {9p}) 求 出 : 

(a) P{X=Y},(b) P (XEY MCO P{X+ YSZ}. 

(4 LH). SUX MY 中 较 小 者 , V=X—-Y, WHE U AV 相互 独立 ! . 

S X 和 Xs 是 分 别 具 有 泊 松 分 布 {p(k; 和 )} 和 {p(k; 和 2)) 的 相 万 独立 的 随机 变量 . 

(a) 证 明 Xi 十 X 具有 泪 松 分 布 {p(k;Ai 十 2 )}. 

(b) 证 明 ， 给 定 X tX: 的 条 件 下 X 的 条 件 分 布 是 DARA 即 : 


eX, AX 相互 独立 量具 有 共同 的 几何 分 布 1oxp} (如 习题 人， 不 必 计算 ， 直接 证 明 在 
给 定 Xi +X, 的 条 件 下 Xi 的 条 件 分 布 是 均匀 的 ， 即 是 


Pix, =k XI 十 X =n} = k= O0,sl,ee*.7, (9.2) 


dl 
n+ 1’ 
A Xie X, 为 相互 独立 的 随机 变量 ， 每 一 个 都 具有 均匀 分 布 P{X =k) =D k= 1, 
2,…,N SU, AV, BI Xi X, 中 之 最 小 者 和 最 大 者 . 求 出 U AV, Aa. EA 
估计 习题 第 3 节 例 (e) 的 联系 是 什么 ? 

第 3 节 例 Ce) 中 估计 问题 的 继续 ， 

(a) 求 出 最 大 和 最 小 观察 值 的 联合 分 布 ， 特 别 ，n 二 2， (提示 : 首先 计算 Pi X<r, Y2s}.) 
(b) 求 出 在 条 件 X=> 下 最 初 两 个 观察 值 为 7 和 & 的 条 件 概率 . 

(c) 求 出 ECX:)， 从 而 找 出 Var(X) 4 和 N 一 ce 的 一 个 渐 近 表示 式 (n 固定 ). 

模拟 均匀 硬币 .给 定 一 个 出 现 正 面 的 概率 为 a 的 不 均匀 硬币 ， 如 下 模拟 一 个 均匀 休 币 : 
扔 此 不 均匀 硬币 两 次 ， 把 出 现 HT 或 TH 视 为 出 现 正 面 或 反面 . 如 果 此 两 事件 都 未 出 现 ， 


则 一 直 扔 下 去 直到 出 现 为 止 ， 〈a) 证 明 此 模型 导出 一 个 具有 p=- HARARE. 


(b) 求 出 现 一 个 HT 或 TH 所 需 的 扔 钱 次 数 的 分 布 与 期 望 . 
第 6.8 节 例 (a) 的 巴 拿 赫 火 盒 问题， 证明 分 布 {) 的 期 望 为 : =NI ul., HS 


1. 几何 分 布 是 取 整 数值 的 概率 分 布 惟一 一 个 具有 上 述 性 质 的 分 布 ， 可 参见 L60]. 


12. 


13. 


14. 


15. 


16. 


17. 


18. 
19. 


20. 


Zi. 
22. 


23. 
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特 林 公式 证 明 它 近似 地 为 2 / N/a]. C N=50 时 ， 其 期 望 大 约 为 7. 04.) 


(提示 运用 下 个 等 式 (N 一 mw 一方 (2N 二 Du 一 广 (r 十 D)wri， 运 用 事实 Du =D 
抽 祥 验收 ， 假 定 一 批 产 品 中 废品 率 为 p， 而 每 一 件 被 抽出 来 受 检验 的 概率 为 p .因此 ， 
我 们 可 以 把 全 部 产品 分 成 四 类 ， 即 是 “接收 了 而 且 进 行 过 检验 ”, “接收 了 但 是 没有 进行 
过 检验 ”， 等 等 ， 其 对 应 的 概率 分 别 为 pz ,pq ,pgq,99， 其 中 gq 一 1 一 p,q 一 1 一 户 ， 因 此 
我 们 得 到 一 串 双重 的 伯 努 利 试验 [参看 第 6.9 节 例 CO] S 六 为 发 现 第 一 件 废品 以 前 通 
过 检验 台 的 产品 的 件数 (可 以 是 真正 检验 过 的 ， 也 可 能 是 没有 检验 过 的 . ;，K 为 其 中 没 
有 被 发 现 (没有 检验 ) 的 废品 的 件数 ， 求 出 NAK 的 联合 分 布 及 边缘 分布 ， 


(EER). RE GTS) 和 Cov(K,N). [在 实际 工业 生产 中 ， 被 发 现 的 废品 将 要 用 合格 
产品 去 代替 的 ， 因此 ，K/(N 十 1) 是 其 中 废品 的 比例 ， 它 测量 了 这 一 批 产品 的 质量 ， 注 


K 
= EGG p ELKEN DR — E]. 


ERAS RRR, SX 为 从 第 一 次 试验 开始 的 连贯 〈 成 功 连贯 或 失败 连贯 ) 的 
长 度 ，(a) 求 出 X 的 分 布 和 五 (X)，Var(X),(6)， 令 了 为 第 二 个 连贯 的 长 度 ， 求 出 YY 的 
4) 45 AM ECY) Var(Y) A X.Y 的 联合 分 布 . 

A XY 有 公共 的 负 二 项 分 布 ， 求 条 件 概 率 PLX==j1X 十 Y 二 &) ， 并 证 明 ; 第 2 章 (12. 16) 
式 现在 不 用 计算 而 显然 可 得 ”. 

mE XY 这 两 个 随机 变量 中 的 每 一 个 都 只 取 两 个 值 ， 而 且 Cov X, Y)=0,0) X5 Y Æ4H 
互 独立 的 . 

生日 。 对 一 个 拥有 交 个 人 的 人 群 ， 求 出 一 生 中 恰 有 & 个 人 出 生 的 那些 天 数 的 期 望 但. 〈 一 
年 取 365 天 ， 而 且 一 切 排列 都 是 等 概率 的 . ) 

( 续 上 题 )， 求 出 重复 生日 的 天 数 的 期 望 值 ， 问 ”为 多 大 时 才能 使 这 个 期 望 值 超过 1. 

有 一 个 人 想 开 门 ， 他 共有 把 钥匙 ， 可 以 这 样 设 想 ， 他 用 它们 去 试 开门 时 所 抽取 的 钥 古 
是 相互 独立 的 而 且 是 随机 的 . 求 出 试验 次 数 的 均值 与 方差 . 〈a) 如 果 以 前 选 出 来 的 开 不 
开门 的 钥匙 不 除去 . 〈b) 与 (a 相 反 .“〈 假 定 只 有 一 把 钥匙 能 打开 这 扇 门 .精确 分 布 在 第 
2.7 节 中 给 出 了 ， 但 现在 这 个 问题 并 不 要 求 精确 分 布 . ) 

A (X.Y) 为 随机 变量 ， 其 分 布 为 (1.8) 所 给 出 的 多 项 分 布 ， 求 出 下 (X)，Var(A)， 
Cov(X.Y). QHA. (b) 把 XY RRA n SAVERS A, FLAS 5 RITTER. 
把 一 个 避 子 掷 了 次 ， 求 出 么 点 出 现 的 次 数 和 6 点 出 现 的 次 数 的 协 方差 ， 

在 第 6 章 习题 24 的 关于 野兽 陷 井 的 问题 中 ， 证 明 在 第 v 次 才 陷 入 陷 井 的 野兽 的 个 数 的 期 
望 值 为 nx9p”. 

如 果 久 具 有 几何 分 布 P{X=k}= 二 gp (其 中 =0,1,…)， WEH Var(X) =p. 当 7 为 正 
RAS, HEM A CUM fir. pS RADE rep’. 通过 直接 计算 证 明 上 述 事 实 对 全 部 
r>0 都 对 . 


L 这 个 事实 分 析 地 并 不 明显 ， 它 可 以 引 和 人 N 进行 验证 . 
2, 这 个 推理 可 以 推广 到 二 元 以 上 . 参见 Lell. 


184 BOIS 随机 变量 。 期望值 


24. 


25. 


26. 


27. 


28. 


29. 


30. 


31. 


在 第 3 WH] Cd) 的 等 待 时 间 问 题 中 ， 证 明 
Var(S,) = N} N= Det N= 2)? te toss 

因此 N Var (Sy) ~k’ (MEHE: RSC’ /6). RE: 应 用 在 习题 
23 中 所 得 到 的 关于 几何 分 布 的 方差 . 
( 续 上 题 )， 令 Y, 为 要 求 样本 中 包含 > 个 指定 的 元 素 〈 不 同 于 课文 中 的 任意 ~ 个 不 同 的 元 
A) 所 需 之 抽取 次 数 . 求 出 E(Y,) 和 Var(Y,).、 (注意 : Y, 的 分 布 在 第 2 章 习 题 12 中 曾 求 
出 ， 不 过 现在 这 个 问题 并 不 要 求 用 其 分 布 . ) 
验 血 问题 .六 (相当 大 的 数目 ) 个 人 都 去 验 血 . 这 可 以 用 两 种 办 法 去 进行 . (1) 每 一 个 
APSE. DAT, BORE Nek. GD 把 从 个 人 中 所 抽出 来 的 血 混在 一 起 进行 
分 析 ， 如 果 试 验 是 阳性 的 ， 那 么 必须 对 这 不 个 人 再 逐个 地 分 别 试 验 . 这 时 对 这 有 个 人 就 需 
要 做 有 1 次 试验 了 ， 假定 对 所 有 的 人 来 说 ， 试 验 是 阳性 反应 的 概率 都 是 p， 而 且 这 些 人 
都 是 统计 独立 的 . 
(a) 从 六 个 人 中 所 抽出 来 的 混合 样本 的 试验 是 阳性 的 概率 是 多 少 ? 
(b 在 方案 GD 下 ， 所 需要 进行 的 试验 的 次 数 X 的 期 望 值 是 多 少 ? 
(c) 为 了 使 得 在 方案 Gi) 下 所 需要 试验 的 次 数 和 的 期 望 值得 最 小 ,& 究竟 应 该 怎样 ? (不 

必要 对 上 进行 数值 的 计算 .) 
(d) 证 明 此 & 有 近似 于 1/Yp， 因 此 试验 的 最 小 期 望 值 约 为 2N Jp. (此 附注 来 自 MS. 

Raff. ) 
样本 结构 ， 有 一 个 由 r 类 元 素 构成 的 总 体 ， 其 中 各 类 的 元 素 的 个 数 之 比 为 Pp: pot oot py. 
有 放 回 地 从 这 个 总 体 中 抽取 一 个 大 小 为 n 的 随机 样本 ， 求 出 在 样本 中 不 包含 那些 类 的 元 
素 的 类 数 的 期 望 值 . 
今 针 为 ri 个 a 和 7; 个 8 的 随机 排列 中 a- 连贯 的 个 数 ， 在 第 2. 11 节 习 题 13 给 出 了 XX 的 
分 布 ， 试 求 出 ECX) 和 Var(X). 
在 波 利 亚 饶 子 模型 中 [第 5.2 节 例 (c)]， 当 第 nn 次 试验 的 结果 是 黑 时 XX, 为 1; 结果 是 红 
nt XA 0, 证 明 p(X Xn) =c/ btr to), AP men, 
(C LH) SS, Bain 次 抽取 中 黑 球 的 总 数 ( 即 是 S, =X HX: +++ X,). Ri ECS,) 
和 Var(S,)， 证 明 这 个 结果 可 通过 运用 第 5.8 节 习 题 22 的 递 推 公式 (提示 ， 参见 第 5.8 
“3 -J ft 19,20.) 
分 层 抽样 .一 个 城市 有 2 个 区 ， 其 中 住 有 r 个 居民 的 区 共有 nj Hm tmterHn). & 
m= Dn; /n 为 每 一 区 居民 的 平均 数 ， 目 令 忆 一 (rx)/n) 一 mw 随机 地 无 放 回 地 选取 
个 区 ， 然 后 把 样本 中 每 一 区 的 居民 的 数目 调查 出 来 ， 令 XI ,…,X, 分 别 为 这 7 个 区 的 拓 民 
数 ， 试 证 

F(X, fo +X.) = mr Var(X +e + X,) = O, 

(注意 : 有 放 回 的 抽样 的 方差 较 大 ， 其 方差 为 a 7). 


1. 这 个 问题 的 来 源 是 在 第 二 次 世界 大 战 中 由 道夫 曼 (Dorfman〉 所 发 展 出 来 的 一 种 新 技术 ， 在 军队 中 
实行 方案 Gi) 能 节省 80%， 可 参见 [62], L63], L64]. 


32. 


33. 


34. 


35. 


36. 
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随机 链 的 长 度 ， 在 zy 平面 上 ， 有 一 个 由 ?个 环 所 构成 的 链 《〈 每 一 环 的 长 度 为 一 个 单位 
长 )， 相 邻 二 环 之 间 的 夹 角 各 以 1/2 的 概率 取 值 士 x<， 这 里 a WERK. MIRE SKA ETE 
互 独 立 的 ， 链 的 长 度 L, 是 一 个 和 随机 变量 ， 我 们 要 证 明 


2v _ 1 十 cosa __ 1 — cos” a 
En) "T= cos a 2008 a tT — cos a)?" 


不 失 普 遍 性 ， 我 们 可 以 假定 第 一 个 环 落 在 正 x 轴 的 方向 ， 第 个 环 和 正 x 轴 的 夹 角 
为 一 随机 变量 Se 1 $ 这 里 So =0, S: 一 心 一 1 + aXe. 而 Xe 是 相互 独立 的 随机 变量 ， 月 各 以 
1/2 的 概率 取 值 士 ]， 第 个 环 在 两 个 坐标 轴 上 之 投影 分 别 为 cos S- A sin S-i. BEART n 


(9. 3) 


之 ] 有 
wl n-i 
L? = ( X} cos S.) 十 (>，sin SY). (9. 4) 
k=0 k=0 
对 m<in 用 归纳 法 依次 地 证 明 
Ecos S,)=cos"a,ECsin S,)=0; (9.5) 
E( (cos S,,) * (cos S,))=cos™ “a * E€cos’S,) 3 (9.6) 
E((sin S « (sin S,))=cos" "a * E(sin’S,,); (9,7) 
1 一 cos ta 
ECL2)— ECLi_,)=1+2 cosa’ Toco (9,8) 
cosa 


(二 0)， 从 而 最 后 得 出 (9. 3). 


一 串 伯 努 利 试验 序列 一 直 继 续 到 出 现 ~ 次 成 功 为 止 ， 其 中 -是 一 个 固定 的 整数 . 令 % 为 
需要 的 试验 次 数 ， 求 + E (r/X). (定义 导出 一 个 无 穷 级 数 ， 但 它 有 有 限 的 表达 式 . ) 
在 把 r 个 球 放 入 nn 个 盒 的 随机 排列 中 ， 人 恰巧 发 现 m 个 盒 是 空 的 概率 满足 第 2 章 的 递 推 公 
st (11.8). Sm 为 空 盒 的 个 数 的 数学 期 望 值 ， 从 递 推 公式 证 明 
M+ 一 (1 — n IM,» 
并 且 推 出 
m, =n d=)", 
令 S, An RAB AAR MOK. EAA 
E< S, —np| )=2vgblv;n, p) 9 
HF v HWRE np <o Supt] 的 整数 . 


提示 : 左边 一 A ap OOpa. BIAS 6-H (10.7). 
S (XO 为 相互 独立 且 具 有 共同 分 布 的 随机 变量 序列 ,假定 X 只 取 正 值 而 且 


1. 这 是 化 学 中 长 聚 含 物 分 子 的 长 度 问题 的 二 维 类 似 ， 在 我 们 的 问题 中 随机 变量 L; 不 能 表 为 简单 的 随 
机 变量 的 和 ， 

2， 这 个 例子 说 明 随 意 停 止 与 不 随意 停止 的 区 别 ， 如 果 试 验 的 次 数 7 固定 ， 则 成 功 次 数 N 与 试验 次 数 ” 
之 比 是 一 个 随机 变量 ， 其 期 望 值 为 p， 然 而 ， 在 我 们 的 例子 中 ， 当 成 功 次 数 r 固定 ， 而 所 知之 试验 
次 数 X 依赖 于 偶然 性 时 ,> 与 X 之 比 的 期 望 值 就 不 一 定 是 pz 了， 例如 ，p 二 1/2 时 ， 对 r=2 我 们 有 
E(2/X)=0. 614, MAH 0.5, X r=3, RITA EG/X)=0. 979, 
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E (X,) = 二 a 和 上 (Xr!) =b EWE. 4S, =X t+ +X,. HE (GO) 是 有 限 的 , ME 
E (X,/S,) =j k=l, 2an. 
37. CL). WEBA 


EC() 一 M Rmn, 
S, n 
E(22) =1+(m— n)a ELS >, WR mn. 


38. G XX,…,X, 为 相互 独立 且 具 有 共同 分 布 的 随机 变量 ， 令 其 均值 为 m， 方差 为 ， 令 了 = 
CX) ter +X, n. 证 明 ” : 


-FE(》 XR) 0 . 
n— l = 


39, A X e, X, 是 相互 独立 的 随机 变量 S U A Xoe, Xe MPR. VA Xe ott) Xn AY PA 
H (kn). WEB U.V 是 相互 独立 的 随机 变量 . 


40， 切 比 得 夫 不 等 式 的 推广 令 YCz) 在 >>0 的 地 方 是 一 个 单调 上 升 的 正 画 数 而 且 假定 
EKI X|))=M 存在， 证明 


M 
P| XSS 


41. ARZ (Schwarz) 不 等 式 . 对 于 任何 两 个 县 有 有 限 方差 的 随机 变量 AX AMY Ri, 都 有 
F(X 过 ECX”)E(Y?)， 由 二 次 多 项 式 E((LX 十 Y)? ) 非 负 这 一 事实 证 明 上 述 不 等 式 . 


1. 习题 37 可 由 习题 36 推出 的 意见 是 由 钟 开 莱 提出 的 ， 
2， 这 可 解释 为 ， XXE, (2 一 1) Be 之 无 偏 估 计 重 . 
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10.1 同 分布 的 随机 变量 列 


在 第 7 草 和 第 8 人 草 中 所 得 到 的 有 关 但 努 利 试验 的 极限 定理 ， 是 一 般 的 极限 定理 的 
特殊 情况 ， 后 者 不 可 能 在 本 卷 书 中 讨论 ， 但 是 ， 为 了 揭示 随机 变量 的 期 望 的 新 特征 ， 
我 们 在 此 处 还 是 略为 讨论 一 下 大 数 定 律 的 一 些 个 例 . 

当 我 们 考虑 和 次 伯 努 利 试 验 的 成 功 次 数 $, 依赖 于 这 次 试验 时 ， 就 较 清楚 地 看 
出 伯 努 利 试验 与 随机 变量 理论 之 间 的 关系 ， 对 于 每 次 试验 (例如 第 nn 次)，S, BES, 
增加 1 或 0， 故 可 把 S, 写成 : 

S, =X, +X, + +X, (1.1) 
其 中 X, “456 k 次 试验 出 现成 功 时 为 1 否则 为 0. A, S, 是 个 相互 独立 的 随机 变 
量 之 和 ， 其 中 每 一 个 随机 变量 分 别 以 概率 p 和 a (二 1 一 ) 取 值 1 MO. MBA 1.1) 
的 和 ， 可 以 直接 推广 到 Xi;(& 二 1,…,n) 是 具有 公共 分 布 的 相互 独立 的 随机 变量 列 的 场 
合 . 第 6.4 节 的 〈( 弱 ) 大 数 定律 说 : 当 n 很 大 时 ， 平均 数 S/n 是 倾 回 于 接近 p 的 . 
这 是 下 述 定 理 的 特例 . 

大 数 定律 ” 设 {X;} 是 相互 独立 上 且 具有 公共 分 布 的 随机 变量 序列 . 如 果 其 期 望 rp 一 
E(X;) 存 在 ， 则 对 每 个 e >0, 4 n> 

P| ] 到 二 加 


>ej 一 0， (1. 2) 


Bl. 平均 数 S,/n 与 期 望 j 之 间 的 偏差 小 于 任意 给 定 的 e 的 概率 趋 于 1. 

最 先 对 上 述 一 般 情景 证 明 此 定理 的 是 辛 钦 !， 该 证 明 加 了 方差 Var(X) 有 限 这 个 
不 必要 的 条 件 *:， 而 在 方差 有 限 这 个 条 件 下 ， 我们 有 下 述 更 精确 的 结果 . 它 是 但 努 利 
试验 的 棣 莫 弗 - 拉 普 拉 斯 极限 定理 的 推广 ， 而 

中 心 极限 定理 ” 设 {Xi) 是 相互 独立 且 具 有 公共 分 布 的 随机 变量 序列 ， 假 定 p= 
E(X;) 和 二 Var(Xi) 都 存在 ， 并 令 S, 一 Xi 十 … 十 X,， 则 对 每 个 固定 的 BHA 

p [ZEG Rp (1.3) 

Ab RC) ES 7.1 节 中 引进 的 正 态 分 布 函 数 . 此 定理 是 林 德 伯 格 (J. W. Lindeberg)” 


1. 参见 [65]. 读者 还 应 注意 第 6. 4 节 末 提醒 的 大 数 定 律 与 们 努 利 试验 的 关系 . 
2. DARA KE: WEP a>o, EOX TORERE T. 
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所 证 明 的 ， 此 前 ， 李 雅 普 诺 夫 (Ljapunov) 和 其 他 作者 在 更 强 的 条 件 下 证 明 过 此 结 
果 ， 必 须 理解 此 定理 只 不 过 是 更 一 般 的 定理 的 特例 .。 这些 更 一 般 的 定理 表述 和 证 明 ， 
我 们 在 第 二 卷 B 中 才 讨 论 ， 注 意 此 处 〈1. 3) 结论 比 (1.2) 强 . 这 是 因为 (1.3) 给 
出 了 偏差 |n 1S, 一 x| 大 于 o/Vn 的 概率 的 估计 值 ， 另 一 方面 也 须 注 意 ; 大 数 定 律 
(1.2) 并 不 要 求 X 具有 有 限 方 差 ， 从 这 种 意义 上 讲 ， 它 比 中 心 极限 定理 更 一 般 ， 正 
因为 这 样 ， 我 们 将 给 出 大 数 定律 的 独立 证 明 . 不 过 ， 我 们 还 是 先 举 几 个 例子 来 说 明 
这 两 个 极限 定理 . 

Gl (a) 在 独立 抛 据 一 个 对 称 的 山 子 的 试验 序列 中 ， 令 X; 是 第 & 次 撕 出 的 点 数 . 
则 ECX,) =A +2+34+44+54+6)/6=3.5, Var(X) =(P +22 +3 +47 +5 +6) /6— 


3. 5 一 器， 大 数 定律 的 结论 是 ， 当 很 大 时 ， 平 均 点 数 5,/n 倾向 于 和 3. 5 很 接近 ， 
但 中 心 极限 定理 的 结论 是 : 


P{|S,—3.5n|<a* (3. 5n /12)7 =R Ca) —N(—a), (1.4) 
当 n=1000, a=1 Ef, P{3450<S,<3550}=<0. 68. 4 a=0. 6744 it, (1.4) 的 右 


BFL. BRL, ME, S, 落 在 区 间 3500+36 以 外 和 以 内 是 等 可 能 的 


(b) 抽 样 ， 设 一 社区 有 六 个 家 庭 ， 其 中 恰 有 个 小 孩 的 家 寿 有 Ni 个 (& 王 0,1,…， 
IN, 二 N)， 随 机 选取 一 个 家 庭 ， 其 小 孩 的 个 数 是 一 个 随机 变量 ， 它 取 值 v 的 概率 是 
p.=N./N. 一 个 有 放 四 抽样 的 大 小 为 n 的 样本 ， 就 是 nn 个 相互 独立 的 随机 变量 ,或 
“观察 值 ”X, ,…, 义 ,， 它 们 具有 相同 的 分 布 ，S,/n 是 样本 均值 ， 大 数 定律 告诉 我 们 ; 
对 充分 大 的 随机 样本 而 言 ， 样 本 均值 很 靠近 于 y= 二 站 ,二 vwN,/N， 这 是 总 体 的 均 
值 ， 中 心 极限 定理 使 我 们 能 够 估计 偏差 可 能 的 大 小 ， 并 能 决定 可 靠 的 估计 所 需 的 样 
本 的 大 小 ， 在 实际 中 ，w“ 和 都 是 未 知 的 ， 但 是 ， 通 常 可 以 易于 获得 o 的 初步 的 佑 
计 ， 且 怎 能 使 估计 较 安 全 .如 果 我 们 希望 样本 均值 S/n 与 未 知 的 总 体 均 值 之 间 的 


RDFA, WA, PERK n 应 该 满足 ， 


p| |" 
n 


l 
<5 | 50. 99, (1.5) 


Nor) —RNC— x) =0. 99 的 根 是 xz 一 2.57…， 因 此 应 该 满足 : Vn /100 22.57, B 
n2660. Fk, RAWKDKRAM d 的 审慎 的 估计 来 导出 ， 类 似 的 情况 经 党 
发 生 ， 基 于 对 大 数 定律 的 信赖 ， 实 验 者 才 把 n 次 测量 值 的 平均 来 做 未 知 的 理论 的 期 
望 值 的 估计 ， 这 种 估计 的 可 靠 性 ， 只 能 用 2 来 判断 ， 而 人 们 通常 对 的 估计 是 粒 
BG AY. 

(0) 汉 松 分 布 ， 在 第 7.5 节 中 ， 我 们 曾 发 现 ， 当 很 大 时 ， 泊 松 分 布 (pCk;4)? 可 
以 用 正 态 分 布 来 逼近 ， 实际 上 ， 这 是 中 心 极限 定理 的 一 个 直接 推论 ， 假 定 xX, HAW 
松 分 布 {(pC&;X)， 则 S, 具有 均值 和 方差 都 是 ny WAA km). Æ my 写作 
A, Á neo, A 
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>) EM /kl > RNA), (1.6) 


RAHB VA 
此 处 的 和 号 ， 是 对 一 切 小 于 1) 十 8 人 的 & 来 求 的 ， 显然 ,1 按 任意 方式 趋 于 co，(1. 6) 
式 都 成 立 ， 这 是 -一 个 有 广泛 意义 的 定理 ， 它 在 发 散 级 数 求 和 的 理论 中 也 有 应 用 ， 也 
可 用 于 估计 (1. 6) 式 左右 两 边 的 差异 . > 


关于 期 望 不 存在 的 随机 变量 的 附注 


如 果 期 望 不 存在 ， 则 大 数 定律 和 中 心 极 限定 理 两 者 都 没有 意义 ， 但是， 它们 
可 用 更 一 般 的 定理 来 蔡 代 ， 这 些 定理 仍然 可 以 提供 一 些 信 息 ， 在 近代 理论 中 ， 无 期 
A (期 望 不 存在 ) 的 随机 变量 扮演 着 重要 的 角色 ， 物 理 中 的 等 待 时 间 和 再 现时 间 束 
是 这 种 类 型 ， 甚 至 在 简单 的 扔 硬币 的 游戏 中 ， 都 会 出 现 这 种 情况 . 
假定 n 个 硬币 一 一 抛 毛 ， 设 Xi 为 第 & 个 硬币 掷 出 的 累积 的 正面 数 与 累积 的 反 
面 数 第 一 次 相等 时 的 等 待 时 间 ， 则 {X;} 是 相互 独立 且 具 有 同 分 布 的 随机 变量 : 
P{X,=2r}= fa» 其 中 概率 分 布 由 第 3 草 (3.7) 所 定义 和 和 S, =X, bee FX, 的 分 布 
与 第 nn 次 “累积 的 正面 次 数 等 于 累积 的 反面 次 数 ” 出 现时 的 等 竺 时 间 的 分 布 相 同 . 
第 3.7 节 定 理 4 求 出 了 S, 的 分 布 ， 并 且 还 证 明子: 
PLS, <n? x) 201 -—RNC/V 2) J. (1.7) 
此 处 ， 我 们 得 到 了 一 个 与 中 心 极限 定理 有 相同 的 特征 的 极限 定理 ,但 此 处 有 极限 分 
布 的 随机 变量 是 S,/n 而 不 是 S,/n， 用 物理 学 家 的 语言 来 说 ，X 代表 同一 个 物理 量 
的 独立 测量 值 ， 定 理 断 言 ， 平 均值 
(XX 十 … 十 XX,)/n 
随 n 的 增加 而 概率 地 线性 增加 ， 此 反常 的 结果 不 能 作 病 态 情况 而 除去 ， 因 为 此 处 的 
X, 就 是 许多 物理 过 程 和 经 济 过 程 中 的 典型 的 等 待 时 间 . 极限 定理 (1.7) 也 是 许多 无 
期 望 的 随机 变量 的 近代 极限 定理 的 典型 . | 


"10.2 大 数 定律 的 证 明 
不 失 普遍 性 可 设 p= ECX,)=0, BM, È X 以 和 一 pw， 这 只 不 过 是 改变 一 下 符 
号 而 已 ， 对 到 一 Var(CX 存在 的 特殊 情形 ， 由 第 9 章 〈6. 2) 式 的 切 比 雪夫 不 等 式 有 


2 
PIS, ><, (2.1) 
f 


Breen, WERA neon MT 0. 1.2) 得 证 . 
对 二 阶 矩 不 存在 的 情形 ， 证 明 较 难 . UN. 可 用 截 是 法 而 化 为 前 述 情 形 ， 此 法 
在 证 明 各 种 极限 定理 时 是 一 种 标准 方法 . 6 为 即将 要 定义 的 常数 对 每 个 mn， 定义 一 对 


L 类似 的 无 期 望 的 随机 变量 的 大 数 定律 ， 可 参见 10.4 节 和 10.8 节 习题 13，(1.7) 的 一 些 令 人 惊奇 的 
推论 ， 在 第 3 章 中 曾 详细 讨论 过 
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随机 变量 如 下 : 
U,=X,5V,=0, %%4|X,|<én, (2. 2) 
U,=0,V,=X, “4 | X; | >ôn. 
此 处 k=, mn WIE U, BV, Xin 的 依赖 性 . 由 此 定义 有 
X, =U, +V,, (2. 3) 
为 证 大 数 定 律 ， 只 需 证 明 任 给 e 汪 0， 可 取 常 数 6， 使 得 >ce 时 有 
P{ |U, += +U, |> e n}—>0 (2.4) 
和 
PV, te $V, | >Fen} +0. (2.5) 
& Xi 所 可 能 取 的 值 为 x1,x:,…, 且 其 对 应 的 概率 为 f(x;). 令 a 二 ECIX;|)， 即 
是 
a= >, | x | f(z) (2. 6) 
随机 变量 U, 上 界 是 6n， 因 此 显然 有 
E(U: )<aðn. (2.7) 
MIA U os U, 相互 独立 上 且 具 有 同 分 布 〈 以 后 简称 独立 同 分 布 )， 所 以 
Var(U, +° +U,) =nVar(U, Sn ECU: ) <a ôn’ (2. 8) 
男 一 方面 ， 由 Ui 的 特殊 定义 ， 当 noh} 
E(U,)~E(X,) =0. (2.9) 
由 此 推出 : 当即 充分 大 时 
EQU, ++ +U,)?)<2a ôn? (2. 10) 
由 于 
P{\U, +U, | >on S22, (2.11) 
所 以 (2.4) 式 为 第 9 章 切 比 雪 夫 不 等 式 (6.1) 的 直接 变形 . 
HY 充分 小 使 得 上 式 右边 达到 我 们 所 需要 的 那样 小 ， 所 以 《〈2.4) 成 立 . 
至 于 (2. 5)， 要 注意 由 第 1 章 基 本 不 等 式 (7. 6) 有 
P{V +--+V,40}<n P{V, 40}. (2.12) 
对 任意 的 8G 盖 0， 有 
P{V, 40} = P{|X,|>6n} = 2a fC) 
< oe x, | fC) (2. 13) 


m (2.13) 的 右 方 的 级 数 当 nn 一 oo 时 趋 于 0， 因 此 (2.12) HAA 4 n> onthe 


0， 此 结论 比 (2.5) 还 强 ， 定 理 证 毕 . 


> 


watt 
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10. 3 “公平 ”博弈 论 


为 了 进一步 分 析 大 数 定 律 的 含义 ， 我 们 将 使 用 人 们 久 已 习惯 的 赌博 中 的 术语 ， 
但 我 们 的 讨论 可 以 用 到 许多 有 意义 的 问题 中 去 ， 而 且 我 们 的 两 条 基本 假设 在 统计 和 
物理 中 ， 较 之 在 赌场 中 更 有 实际 意义 . 第 一 ， 我 们 假定 财 徒 的 赌 本 无 穷 ， 因 而 不 论 
输 掉 多 少 ， 赌 博 仍 能 不 休止 地 进行 下 去 〈 如 无 此 假设 ) 则 要 考虑 赌 徒 的 “破产 〈 输 
光 )” 问 题 ， 概率 论 的 研究 者 早 就 对 此 问题 很 感 兴趣 . 在 瓦尔 德 的 序 贯 分 析 中 ， 在 
本 书 第 14 章 的 随机 过 程 的 理论 中 ， 此 问题 都 极 具 重要 性 ， 第 二 ， 我 们 假定 财 徒 无 
权 随 意 终 止 赌博 . 试验 的 次 数 即 必须 事先 固定 而 不 依赖 于 赌博 的 进程 . CRE, 
一 个 拥有 无 穷 财 本 的 赌 徒 ， 能 够 等 得 到 一 个 幸运 的 连贯 并 在 有 利 的 时 刻 退 出 赌博 . 
他 感 兴 趣 的 不 是 指定 的 时 刻 的 不 确定 的 状态 ， 而 是 发 生 在 长 连贯 中 的 最 大 的 起 伏 . 
处 理 此 类 问题 ， 与 其 用 大 数 定律 不 如 用 和 迭 对 数 法 则 更 为 有 效 ， 有 关内 容 请 参见 第 
8.5 节 .) > 

设 某 赌 徒 参加 同一 种 方式 的 赌博 ，X。( 可 正 可 负 〉 是 他 第 & 次 试验 中 获得 的 局 
利 ， 则 和 S, =X 十 … 十 X, 是 他 在 n 次 独立 试验 中 所 获得 的 累积 赢利 ， 设 赌 徒 在 每 次 
试验 中 均 需 付 和 人 场 费 (不 一 定 是 正 的 )， 则 ny 是 累积 入 场 费 ， 而 S, 一 ny 则 表示 
RRA. 4 二 ECX) 存 在 时 ， 大 数 定律 可 以 应 用 . 粗略 地 说 ， 对 于 充分 大 的 n, 
Æ S, 一 nx 多 半 要 比 寺 小 得 多 . 因此， 若 人 场 费 六 比 py 小 ， 则 当 n 很 大 时 ， 该 赌 徒 大 
HARRA nun OMEGA. FP, BADR yx > 上 wp， 该 赌 徒 实际 上 最 终 会 输 ， 
GAZ. 过 yp 对 赌 徒 有 利 ， 而 py DATEER A. 

注意 :上述 讨论 并 未 涉及 u =u 时 的 情况 ， 对 此 情况 ， 惟 一 可 能 的 结论 是 ， 对 充 
分 大 的 2， 累积 赢利 或 损失 S, 一 nx 相对 于 nn 来 说 要 小 的 概率 非常 大 ,但 并 没有 党 
S, 一 nu 多 半 为 正 还 是 多 半 为 负 ” 这 就 是 说 ， 此 赌博 究竟 是 有 利 还 是 不 利 ， 在 上 古典 理 
WP, E uS 为 公平 价格 而 称 满足 “ww 二 pj” 的 博弈 为 “公平 ”博弈 此 名 称 并 
不 妥当 ， 且 由 它 造 成 了 许多 错觉 ， 必须 了 解 : 一 个 “公平 ”博弈 ， 可 能 对 请 寞 一 方 
有 利 也 可 能 不 利 . > 

在 赌博 游戏 和 其 他 简单 场合 ， 随 机 变量 X, 的 二 阶 和 矩 是 存在 的 , “公平 ”性 的 概 
念 可 以 验证 ， 但 是 ， 当 方差 是 无 穷 大 时 ，“ 公 平 博 弈 ” 变 得 毫 无 意义 .没有 理由 相 
(x, 净 累 积 赢 利 S, 一 nu 会 围绕 着 0 起 伏 . 事实 上 ， 有 这 样 的 “公平 ”博弈 的 例 
子 “ ， 博 弈 一 直 净 和 输 的 概率 趋 于 1， 大 数 定 律 断言 : 此 净 输 的 大 小 的 阶 大 约 比 二 的 阶 
小 ， 然 而 ， 其 他 结论 就 没有 了 . 假设 a, 是 任意 一 个 满足 a,/n>0 的 序列 ， 可 以 构造 
一 个 “从 平 ” 博 弈 ， 在 第 nn 次 试验 其 净 累 积 输 款 超 过 a, 的 概率 趋 于 Jal 中 包 
仿 了 一 个 例子 ， 在 那个 例子 中 ,博弈 者 事实 上 必 输 无 疑 而 且 其 输 蒜 超过 /log n. 此 
博弈 是 公平 的 而 且 人 场 费 是 1， 很 难 想像 ， 一 个 博弈 者 ， 其 输 款 实际 上 稳定 上 升 时 ， 
他 还 会 认为 博 奔 是 公平 的 . 
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如 果 把 这 种 现象 作为 病态 的 或 没有 现实 重要 性 的 个 例 而 排除 之 ， 那 就 错 了 . 把 
期 望 不 存在 的 随机 变量 排除 掉 ， 已 经 在 应 用 中 造成 了 很 大 的 危害 ， 因 为 这 类 随机 变 
量 即 使 在 最 简单 的 随机 过 程 中 ， 都 扮演 着 必 不 可 少 的 角色 .例如 ， 在 第 3 章 讨论 的 ， 
作为 许多 随机 过 程 的 原型 的 、 简 单 的 随机 徘徊 或 扔 硬币 的 游戏 )， 如 第 3 章 中 所 证 
明 的 ， 对 此 类 随机 徘徊 ， 其 等 待 时 与 初 过 的 期 望 就 不 存在 ， 因 此 ， 关 于 随机 起 伏 的 
课题 中 就 有 病态 和 与 直观 不 符 的 现象 . 这 类 错误 的 直观 ， 与 许多 近代 概率 论 的 应 用 
中 受 下 列 两 种 错误 观念 的 强烈 影响 是 一 样 的 ; 一 是 传统 的 不 当 的 理解 大 数 定 律 ， 二 
是 关于 所 谓 “ 平 均 律 ” 的 似是而非 的 解释 ， 在 古典 理论 中 ， 数 学 分 析 不 可 避免 地 闯 
杂 者 经 验 主 义 与 形而上学 的 考虑 ， 而 且 某 些 东西 坚持 用 各 种 极限 定理 来 处 理 ， 这 也 
变 成 了 一 种 传统 . 

现在 ， 让 我 们 回 到 “正常 ”的 情形 ;不仅 E(Xi) 存 在 ， 而 且 Var(Xi) 也 存在 . 
在 这 种 情况 下 ， 大 数 定律 是 中 心 极限 定理 的 一 个 附属 推论 。 中心 极限 定理 告诉 我 
们 : 对 “公平 ”博弈 而 言 ， 长 连贯 的 纯 赢 利 5, 一 ny 的 大 小 的 阶 与 Vn 差不多 ， 而 对 
充分 大 的 nx， 此 纯 赢 利 是 正 的 和 负 的 差额 大 致 相 等 .因此 ， 当 应 用 中 心 极 限定 理 时 ， 
“公平 ”被 证 实 了 ， 但 是 ， 即 使 在 这 种 场合 ， 我 们 还 是 用 强调 “长 连贯 ”一 词 的 方 
法 来 用 极限 定理 处 理 它 . | 

WAM. SRA “THM E EM”. 赌 徒 每 赌 一 次 要 付出 yy 二 1 元 
的 入 场 费 ， 但 也 有 10 飞 的 概率 赢得 10' 一 1 元， 此 处 ， 我 们 有 一 个 伯 努 利 试验 ， 而 
上 且 是 “公平 ”的 博弈 . 在 1 000 000 次 试验 中 ， 赌 徒 付出 的 仅仅 是 这 1 000 000 次 的 
入 场 费 ， 而 他 可 能 博得 0，1，2… 次 “ 红 彩 ” 由 二 项 分 布 的 泊 松 逼近 可 知 ; 具有 好 
几 位 小 数 的 精确 度 ， 他 博得 有 次 “ 红 彩 ”的 概率 为 eV/A!， 因 此 ， 赌 徒 有 0. 368 的 
概率 输 掉 1 000 000 元 ; 有 同样 的 概率 略 赢 一 点 点 ; 有 0. 184 BY BE Ata AA 1 000 000 
Jos ttt 等 等 ， 此 处 ，10 Rinse Str FTE Pe, A Hk 
从 泊 松 分 布 ， 这 种 赌博 在 实际 中 是 可 行 的 ， 例 如 ， 像 第 4. 4 PIR. PSR IR 
多 的 牌 的 相合 的 问题 . 没有 人 相信 ， 在 三 四 次 相合 之 后 ， 大 数 定律 具有 实际 的 可 柠 
作 性 .同样 的 道理 ， 除 非 进 行 了 数 百 万 次 赌博 ， 把 大 数 定律 应 用 到 “ 吃 角 子 的 老虎 
机 ”中 去 ， 否则 也 是 没有 意义 的 目前， 火灾 、 车 祸 和 其 他 类 似 的 你 险 ， 部 属于 这 
种 类 型 ， 赔偿 费 非常 大 ， 但 相应 的 概率 非常 小 .此 外 ， 投 保 者 每 年 只 涉及 一 次 运 
验 ， 所 以 试验 次 数 n 不 可 能 变 得 很 大 ， 对 他 而 言 ， 博 弈 必然 是 “不 公平 ”的 ， 然 而 
通常 在 经 济 上 有 好 处 ， 大 数 定律 与 他 毫 无 关系 ， 而 对 保险 公司 来 说 ， 它 却 要 进行 很 
多 次 交易 .由 于 方差 很 大 ， 随 机 起 伏 是 必然 的 ， 保 险 费 必须 定 得 恰当 ， 以 使 每 一 年 
的 巨额 赔偿 费 能 抵消 掉 ， 与 保险 公司 有 关 的 ， 与 其 说 是 大 数 定律 不 如 说 是 “破产 
问题 . 


1. 近代 概率 论 的 研究 者 ， 或 许 会 对 下 述 趋势 大 感 惊 奇 : 1934 年 以 后 ， 专 家 们 用 纯 分 析 的 术语 来 表达 
概率 论 中 的 基本 极限 定理 . 
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在 古典 理论 中 ， 期 望 这 一 概念 并 未 从 概率 的 定义 中 明显 地 分 离 出 来 ， 也 没有 关 
于 它 的 数学 陈述 ， 因 此 ， 期 望 为 无 穷 大 的 随机 变量 引起 了 很 大 的 麻烦 ， 苏 至 近代 概 
率 论 的 研究 者 ， 讨 论 非 常 近 代 化 的 问题 时 对 它 都 很 阳 生 ， 期 望 为 无 穷 大 的 随机 变量 
的 重要 性 ， 我 们 已 经 在 前 一 市 强调 过 了 ， 在 此 ， 给 出 一 个 关于 这 类 随机 变量 的 大 数 
定律 的 例子 是 适宜 的 .为 此 ， 我 们 引用 历史 上 著名 的 所 谓 彼得 保 那 论 .* 

彼得 堡 博弈 的 一 次 单个 试验 是 指 : 扔 一 个 均匀 的 人 硬币 直到 出 现 正面 为 止 。 如 果 
此 事件 发 生 在 第 r RGU, WAGERS 2 元 收益 . 换言之， 我 们 处 理 一 列 相互 独立 的 
随机 变量 ， 其 可 能 取 的 值 为 : 2 ,2 ,2 ，… 相 应 的 概率 为 : 2 ” ,2 ,2“…。， 它们 的 期 
望 形式 上 定义 为 zx,f (x,), 其 中 福 , 二 2 ,f(zx,) 二 2 ， 所 以 此 级 数 中 每 一 项 都 是 1， 所 
以 其 赢利 没有 有 跟 的 期 望 ， 从 而 大 数 定律 不 能 应 用 ， 现 在 我 们 修改 博 研 规则 如 下 : 
如 果 扔 到 第 N 次 还 不 能 做 决定 〈 即 前 NKR ORR), BRAM EAE A FI. 
新 规则 显然 对 赌 徒 较为 不 利 ， 但 在 新 的 规则 下 ， 赢 利 的 期 望 是 有 限 的 ， Mim Kee 
律 可 以 应 用 ， 由 此 推出 : 在 老 的 规则 下 ， 即 使 赌 徒 在 每 一 局 都 付 NN 元 入 场 费 ， 仍然 
比 新 规则 更 为 有 利于 赌 徒 ， 这 对 任意 一 个 N 都 对 , 但是，N 愈 大 ， 他 获得 正 的 收入 
所 需 之 时 间 愈 长 ， 因 此 , 说 “有 利 ” 的 博弈 是 没有 意义 的 . 古典 理论 断言 : 入 场 费 
二 2 是 “公平 ”的 入 场 费 ， 但 近代 的 研究 者 很 难 理解 这 个 “ 屠 论 ”的 含混 的 讨论 . 

适当 确定 入 场 费 ， 使 彼得 堡 博弈 具有 古典 意义 下 的 “公平 ” 博 宣 的 一 切 性 质 是 
完全 可 能 的 ， 只 是 这 时 入 场 费 不 能 定 为 常数 ， 而 依赖 试验 的 次 数 ， 在 赌场 中 ， 入 场 费 
是 不 能 改 的 ， 由 于 本 金 总 是 有 限 ， 彼 得 堡 博弈 也 是 不 可 能 的 .在 期 望 SEX >00 且 有 
限 的 场合 ， 如 果 当 ?很 大 时 ， 累 积 赢利 S 与 累积 入 场 费 6, 二 ny 之 比 大 约 为 1 OIS —e, 
的 大 小 的 阶 大 致 比 6 二 ny 的 阶 更 小 )， 则 称 此 博弈 是 “公平 ”的 ， 如果 ECXi) 不 存在 ， 
则 我 们 不 能 令 6, = 二 ny 而 必须 用 其 他 的 方法 来 定义 e。 如 果 对 每 个 ec>0， 


P{ | -1 >e) 0, (4. 1) 


则 称 累 积 入 场 费 为 e, 的 博弈 在 古典 意义 下 是 “公平 ”的 .这 与 大 数 定律 完全 类 似 ， 
此 处 6, 二 nu .后 者 被 物理 学 家 的 解释 为 n 次 独立 测量 的 平均 值 界 于 jy 附近 ， 当 极限 
定理 (4.1) 成 立时 ， 它 在 数学 上 和 实际 应 用 中 的 意义 ， 与 大 数 定 律 无 异 . 

现在 ， 我 们 证 明 :， 如 果 取 e =n Logn, HA Logn 是 以 2 为 底 的 对 数 ， 即 
2 二 "， 则 彼得 堡 博 弈 成 为 古典 意义 下 的 “公平 ”博大 . 

证 用 第 2 节 中 曾 用 过 的 截 尾 法 .现在 定义 随机 变量 U 和 Vi(k 二 1,2,…,) 如 下 : 


L 此 悖 论 伯 努 利 (1700-1782) 曾经 讨论 过 ， 伯 努 利 试验 就 是 用 他 命名 的 . 
2. 这 是 广义 大 数 定律 的 一 个 特殊 情形 ， 用 此 定理 很 容易 推出 (4.1) 成 立 的 充分 必要 条 件 ， 参 见 
L68]. 
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U,=xX, V,=0, 当 X, Sn Log Nis (4 2) 
U,=0,V,=X,. 2% X, >n Log n. 
则 

Pije,'S,—-1|>e}SP{jU, +e +U, — e, | ee, } HPV $e +V,40} (4.3) 


这 是 因为 ， 除 了 右边 的 事件 至 少 有 一 个 发 生 ， 左 边 的 事件 不 会 发 生 ， 又 因为 
P{V, +-+V,403 <n P(X, >n Log ns 
所 以 ， 为 证 (4.3), ， 只 需 证 明 ; 
P(|U,+--+U,—n Logn | >en Log n) 一 0， (4.5) 
S um =EU,) 2 =VarU,), BIR HERR n, (ANU, U2. U, 来 说 ， 却 是 一 
样 的 ， 设 ~ 为 满足 2’<n Logn 的 最 大 整数 ， 则 心 王 r， 从 而 对 充分 大 的 mm， 


2 
Log n 0, (4. 4) 


Log n <m, SLog nt Log Log n. (4. 6) 
类 似 地 ， 
ELEU) =2+2? +e HK <2n Log n. (4. 7) 
因为 各 十 … 十 U， 具有 均值 np, 和 方差 no， 用 切 比 雪夫 不 等 式 可 得 
P{|U Hee +U, ngn | >e AETA (4. 8) 
AW, H (4.6) 有 局 一 Log ma， 所 以 (4, 8) 等 价 于 (4. 5). > 


10.5 不 同 分 布 的 情况 


到 现在 为 止 , 我 们 只 考虑 了 同 分 布 的 随机 变量 序列 的 情况 ， 这 种 情况 对 应 着 同 
一 个 随机 博弈 的 重复 施行 但是， 如果 随机 博弈 在 每 一 步 都 改变 博弈 的 类 似 ， 那 么 
发 生 什么 情况 呢 ? 这 是 很 有 趣 的 问题 . 现在， 没有 必要 使 用 赌博 的 语言 了 ， 统 计 学 
家 在 应 用 统计 检验 时 ， 就 会 遇 到 这 类 随机 变量 的 分 布 随 情 况 不 同 而 变化 的 问题 . 

为 确定 起 见 ， 设 想 给 定 一 列 (无 穷 多 个 ) MMO, WHR, BE np RAS 
定 的 分 布 的 相互 独立 的 随机 变量 XX,…,X,， 假 定 它们 的 均值 与 方差 都 存在 ， 并 令 


uC—=E(AX), ot = Var(X,). (5. 1) 
和 S, =X, +e +X, RAHME m, Mes, 如下: 
m= Het, Steti. (5.2) 


[参考 第 9 章 〈2.4) 和 第 9 章 (5.6)|. 
在 相同 分 布 的 特殊 场合 下 ， RISA M, =N l s Sn TNO. 
to R At Te > 0, 都 有 


p{ Smal hoo, (5. 3) 


则 称 序列 {X,} 服 从 (35) KARZ, 
如 果 对 任何 固定 的 w<8， 都 有 
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> 一 


Pia < 


R) AR ARF { X, ,服从 中 心机 限定 理 

概率 论 的 一 一 个 突出 的 特征 古 ， 很 多 随机 变量 序列 (X,}) 都 服从 大 数 定律 和 中 心 极 
限定 理 ， 特 别 地 ， 当 {X,}) 一 致 有 界 时 ， 示 如 存在 一 个 常数 A， 使 得 | Xi SA Wk 
都 成 立 ， 则 大 数 定律 成 立 ， 更 一 般 地 ， 大 数 定律 成 立 的 充分 条 件 是 : 


wt < By» NB) — Nila), (9. 4) 


5 


一 一 人 0. (5.5) 
n 


这 是 切 比 雪夫 不 等 式 的 直接 推论 ， 并 可 用 第 2 节 第 一 段 中 的 方法 来 证 明 . 注意 : 条 
件 (5.5) 并 不 是 必要 的 . [参见 本 章 习 题 14. | 
关于 中 心 极限 定理 ， 已 经 得 到 了 各 种 各 样 的 充分 条 件 ， 但 是 这 许多 充分 条 件 下 
的 中 心 极限 定理 ， 都 被 林 德 伯 格 定理 所 淘汰 了 ， 该 定理 为 : Wee >0, FRM 
APLE U, 如 下 : 
U, =X. pr» 4 | X; ~ pa | eS,» (5.6) 
U,=0, M4 | Xe pu | eS 
如 果 5 一 co 而 且 


LEU) +1, (5.7) 


则 中 心 宜 限定 理 成 立 

如 果 xX, 是 -一致 有 界 的 ， 即 是 | Xi | 二 A， 则 上 二 Xi 一 ju 对 一 切 满足 条 件 8 > 
2Ae_ 1 的 成立 ， 从 而 (5.7) 的 左 端 为 I， 因此， 林 德 伯 格 定理 蕴涵 了 下 述 定理 : 
对 相互 独立 的 一 致 有 界 的 随机 变量 序列 (XX,} RE 5, 一 ceo， 那么 中 心 极限 定理 成 立 . 
已 经 证 明 ， 林 德 伯 格 条 件 也 是 (5. 4) 式 成 立 的 必要 条 件 :， 证 明 将 在 第 二 着 书 中 给 
出 ， 那 里 我 们 还 将 估计 (5. 4) Pa Sz. 

当 随 机 变量 列 {X,} 具 有 同 分 布 时 ， 我们 曾经 证 明 中 心 极 限定 理 比 大 数 定律 强 ， 
对 一 般 情 况 ， 这 并 不 对 ， 我 们 将 要 看 到 : 满足 中 心 极限 定理 的 随机 变量 序列 并 不 服 
从 大 数 定律 的 例子 


例 (FADO 为 固定 的 常数 ， 令 X; 一 士 如 ， 且 取 每 个 值 的 概率 都 是 坟 《 例 如 ， 
扔 一 个 硬币 ， 第 次 的 赠 注 为 局， 此 时 ,pn 一 0, 吕 一 把 ， 且 


peni 


= 1% H2243 a_n 
174-974 + 374 =p aoe tg DFT 


(5. 8) 


— 


SWRI k HA nN. 详 者 注 

. 参见 [70]， 在 此 文中 ， 还 导出 了 : 无 期 望 的 随机 变量 也 成 立 的 广义 中 心 极 限定 理 ， RAPT 
处 仅 考虑 独立 随机 变量 .对 于 非 独立 随机 变量 ， 林 德 伯 格 条 件 既 不 必要 ， 也 不 充分 . 

,原著 此 处 为 士 包 ， 不 要 .一 一 译 者 注 


bo 


Qa 
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acim, RIF GD 成立， 因此 当 A mt AREAL. REEN 
a>, ERRI. 


对 有 一 ]1,2，……71， RIJE: |X, |= PArt, 所 以 ， 当 nn 二 (24 十 1)e 习 时 ， 截 尾 随机 
变量 U 与 XX; 恒 等 ， 因 此 林 德 柏 格 条 件 成 立 ， 从 而 


Plax, jae S, <p} rR) Na). (5.9) 


由 此 可 知 ，S, KD AO BT RA nt, HOY ASS SE AK Ra. TE 


我 们 看 到 了 中 心 极限 定理 对 入 这 0 都 成 立 ， 而 大 数 定律 只 对 ) <T. 


(b) 考 虑 两 个 各 扔 1000 次 硬币 的 独立 试验 序列 (或 掏 空 两 个 各 装 有 1000 个 便 币 的 
袋子 ) ， 我 们 考察 两 个 试验 中 出 现 的 正面 次 数 的 差 D 将 这 两 个 试验 序列 的 各 次 抛 撕 依 
次 从 1 到 1000 和 1001 到 2000 加 以 编号 ， 并 定义 2000 个 随机 变量 X, 如 下 : WRR k 
次 抛掷 出 现 反面 则 今 X= 二 0， 如 出 现 正面 ， 则 当 志 1000 时 令 闷 王 1， 而 当 & 之 1000 


时 ， 令 X= MDX ++ Xos ME, H &<1000 ff p=; A> 1000 时 


p=}; id EFL. LL ED =0, Va D)=50, MT DD 落 在 范围 十 (500)* a 


之 内 的 概率 大 约 为 只 (ao) SN a), BDF “A 2000 RH FEM ERK RS A 
28 1000 的 偏差 So 一 1000” 是 同一 数量 级 . 

(c) 通 过 下 面 关 于 中 心 极限 定理 在 遗传 理论 中 的 一 个 应 用 ， 说 明 中 心 极限 定理 应 
用 的 广泛 性 .在 第 5. 5 节 中 ， 我 们 曾 研 究 过 : 本 质 上 只 依赖 一 对 基因 〈 等 位 基因 ) 的 
性 状 ， 其 他 一 些 性 状 (例如 体 长 )， 可 以 认为 是 很 多 对 基因 的 总 效果 .为 简单 起 见 ， 
假定 对 于 每 对 特殊 的 基因 存在 三 种 遗传 型 ，AA,Aa 或 aa， 设 它们 对 体 长 的 贡献 相应 
为 zi ,zs 与 心 ， 一 个 个 体 的 基因 型 是 一 个 随机 事件 ， 一 对 特定 的 基因 对 体 长 的 页 献 
则 是 一 个 以 一 定 的 概率 取 值 x ,zx; ,zx 的 随机 变量 ， 体 长 是 很 多 这 样 的 随机 变量 X., 
XX, WAAR. 由 于 每 个 贡献 芭 微 小 ， 我 们 可 以 假定 体 长 是 和 数 X 十 … 十 
X,， 但 {X,} 不 一 定 相 互 独立 然而， 中心 极限 定理 对 很 大 一 类 非 独立 的 随机 变量 序 
列 也 是 成 立 的 ， 而 且 也 有 一 定 的 理由 把 许多 随机 变量 序列 {Xe} 粗略 地 作为 相互 独立 
的 来 处 理 ， 这 些 考 虑 可 以 进一步 精确 化 ， 此 处 仅仅 用 以 说 明 : 利用 中 心 极 限定 理 来 
解释 许多 生物 统计 性 状 的 经 验 分 布 与 正 态 分 布 很 接近 . 这 种 理论 也 可 以 对 遗传 性 状 ， 
例如 子女 的 平均 身高 对 其 双亲 的 身高 的 依赖 性 作出 预测 ， 这 类 生物 统计 的 研究 ， 始 
FBR WA KRU. > 


1. Sir Francis Galton (1822—1911); Karl Pearson (1857—1936). 
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"10.6 在 组 合 分 析 中 的 应 用 


我 们 将 给 出 中 心 极限 定理 在 两 个 与 概率 论 并 无 直接 联系 的 例子 中 的 应 用 . 

(a) 逆序 ， 在 一 个 给 定 的 排列 中 ， 称 元 素 w 产生 7 Pe. WRIA r TF 
它 的 下 标 小 的 元 素 〈 即 按 自 然 顺 序 在 a 之 前 的 元 素 ) 在 它 之 后 .例如 在 
《aaaeQal1asaza4) P, TLR a, 和 az 都 不 产生 逆序 ，a， 产生 两 个 逆序 ， a4 不 产生 逆序 ; 
ds 产生 两 个 逆序 ; ag 产生 四 个 逆序 . TE (5.4544 asQ2a1) i}, JOR a, 产生 & 一 上 个 逆 
序 ， 逆 序 的 总 数 为 15， a, 所 产生 的 道 序数 X, 是 一 个 随机 变量 ， 而 SSX etA, 
则 是 逆序 的 总 数 ， 此 处 X, 取 0,1,…,k 一 1 的 概率 都 是 1 /k.， 因此 


(6. 1) 


p 12 十 2 十 … 十 RTD (ky EI 
和 k 2 / 12° 
Gk FE Bt aE AR F a sastar AAT IK 所 以 4X, } SEAR WY. 
由 (6.1) 有 : 


1 十 2 十 … 十 (n 一 1) onla) x 
My na o] (6.2) 


和 


2 lo a — 2m tani Nn ot 
13 Qu k 1) 7 3 (6.3) 


3 n SAKRI, es >n>U,, F, RARE CE RRI VE E U, 恒 等 于 X,， 从 而 


中 心 极限 定理 成 立 ， 因 此 ， 我 们 得 到 下 述 结论 ， REARS ARMTL SZ AM 
排列 数 渐 近 地 为 n! (Na) 一 中 (一 ao) )， 特 别 地 ， 全 体 排 列 中 约 有 一 半 其 逆序 数落 在 
范围 (x /4) 士 0.11 VR 之 内 . 

(b) 循 环 ， 每 个 排列 均 可 分 裂 成 若 于 个 循环 ， 所 谓 循 环 ， 即 是 在 其 内 部 进行 排列 
的 一 个 元 素 组 . 例如 ， 在 (asasaiasa2aa) 中 ， 我 们 发 现 al 和 a; 互 换 了 位 置 ， P| FK 
四 个 元 素 在 其 内 部 进行 排列 ， 故 此 排列 包含 两 个 循环 ， 如 果 一 个 元 素 位 于 其 目 然 位 
置 ， 则 它 构 成 一 个 循环 ， 故 按 自然 顺序 的 排列 Ca ,az ，…a,) 包 含 的 循环 的 个 数 与 其 
元 素 的 个 数 相同 . BAH. FZ A ay saz stets On 9 Ay) FU Cag 9 dg 9 88 9 aalyaz) 的 循环 排 
列 ， 其 循环 的 个 数 都 是 1， 为 了 研究 循环 ， 用 箭头 来 指示 元 素 所 占据 的 位 置 以 表示 排 
列 ， 例 如 ，1->3->4->1 表示 :元素 a 占据 了 第 3 个 位 置 ， 而 元 素 a 占据 了 第 4 个 位 
置 ; 元 素 w 占据 了 第 工 个 位 置 . 因此; 三 步 就 完成 了 这 个 循环 ， 这 个 描述 暗示 a, 在 
其 自然 位 置 ， 即 第 2 个 位 置 . 按照 这 种 记号 ， 排列 (as yas 921 94394255 97 rag)» 应 该 
表示 为 1->3->4->1;2->5->6 一 8->2;7 一 7， 换 名 话说， 我 们 用 连续 n 个 决定 来 构造 一 
个 排列 (ai 9°**5a,). 

我 们 首先 选择 位 置 i 由 ai 来 占据 ， 第 二 步 ， 在 剩 下 的 位 置 中 任 选 一 个 给 a:， 如 
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此 继续 往 下 做 ， 在 第 1， 第 2,…, 第 nn 步 各 有 n,n 一 1,…,1 种 选择 ， 而 且 它 们 中 恰 有 
一 个 元 素 完成 一 个 循环 . 

在 此 结构 中 ， 若 第 k 步 完成 “个 循环 ， 则 令 X=, BWE X, 一 0 在 最 后 一 
fil, X,=X,=X,=1,X,=X,=X,=X,;=X,=0.) BRA, Xi =-14AR4A 在 
SME. WARTA: P=) =H P(X =0)=—4 =, MAX 


相互 独立 的 随机 变量 列 ， 它 们 的 均值 与 方差 为 : 


RT GERD oP 
因此 
太一 1 十 二 十 二 十 … 十 二 log n (6.5) 
2 3 n 
和 
c= 9 as ~ log 7. (6. 6) 


S, 二 XX 十 … 十 X, 是 总 循环 数 ， 它 的 均值 是 m,， 其 人 循环 的 个 数 介 于 log nta viogn 
与 log n 十 8 vlog n 之 间 的 排列 的 个 数 近似 地 为 n1( 居 (B) 一 般 (a))， 改进 的 中 心 极限 定 
理 给 出 的 估计 更 为 精确 


“10.7 强大 数 定律 


(33) 大 数 定律 (5. 3) 断言 ， 对 每 个 充分 大 的 n, 偏差 |S, 一 m, KAEH x 小 得 
多 ， 对 于 伯 努 利 试验 ， 我 们 曾经 指出 过 (第 8 章 ): 大 数 定律 不 能 保证 对 所 有 充分 大 的 
n,|S, 一 m, |/n 始终 很 小 ， 可 能 有 这 种 情况 ， 大 数 定律 成 立 , 但 | 5, 一 m 1/ 一直 在 有 限 
或 无 穷 的 范围 内 摆动 ， 大 数 定律 仅仅 断言 ，|S, 一 m1/n 并 不 经 常 取 很 大 的 值 . 
我 们 称 {X,} 服 从 强大 数 定律 ， 如 果 对 每 个 e 盖 0 和 >l, REZAN 与 之 对 
应 ， 使 得 对 每 个 0, FIA r 十 1 个 不 等 式 成 立 的 概率 大 于 等 于 1 一 6: 
| 3 一 mo 一 NN1…,N 二 rr (7.1) 


n 


(7.1) 可 以 粗略 地 解释 为 ， 对 于 一 切 n>N, |S om, |n 始终 很 小 的 概率 非常 大 . 


1. ERES, X 的 分 布 不 仅 依赖 & 也 依赖 n， 只 要 把 X Wn 降 到 1 重新 编 序 ， 就 会 发 现 其 分 布 仅 依 
赖 于 其 下 标 . [参见 第 11.2 节 例 0] 

2 组合 分 析 中 的 许多 渐 近 佑 计 是 用 其 他 方法 导出 的 ， 见 [81]， 现 在 的 方法 较 简 单 ， 但 应 用 的 范围 较 
小 ， 见 f82]， 这 一 部 分 可 作为 特殊 的 专题 ， 可 以 略 该. 

3. 在 一 般 理论 中 ， 引 人 对 应 于 {X}) 的 样本 空间 后 ， 强 大 数 定律 可 解释 为 ，| Snom | /7 概率 为 1 地 起 
于 0， 用 实 变 函数 的 语言 来 说 ， 强 大 数 定律 所 做 的 论断 是 几乎 处 处 收 笋 ， 而 弱 大 数 定律 则 等 价 于 依 测 
度 收敛 . 
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PRES KEM. 级 数 


Sot /k (7.2) 
Ik 3k FQ AR DALES RA X, SIME KREE MH —PRADRH, ea o HX, 
证 OA, 表 下 述 事件 : 至 少 存在 一 个 满足 2” <n’ in, (ERS C7. 不 
成 立 . 为 证 此 准则 ， 只 需 证 明 ， 对 于 一 切 充 分 大 的 ww (vlog N) 及 一 切 ~>， 有 : 
P{A 十 PPUA AT 十 十 PLAN < 
HELPA KA. FASE A, 蕴涵 了 下 述 事 件 ， MET 2 <n 2 n 


有 
|S,—m, | 2e 2” (7. 3) 
由 第 9. 7 PHRKRMPARASH, 
PLA, 4e”? © se 2 (7.4) 
因此 


PIA) <4e* D2 Da s4 Dat D2" <8e*> 1 (7.5) 


这 就 证 明了 该 准则 > 
作为 一 个 典型 的 应 用 ， 我 们 来 证 骨 : 
=e 如 果 相 互 独立 的 随机 变量 序列 {X,} 具 有 同 分 布 (f(xj)} BEX) A 
在 , 则 {Xi}) 服 从 强大 数 定 律 . 
此 定理 显然 比 第 1 节 中 的 弱 大 数 定律 强 . 由 于 各 自 的 证 明 方法 均 具 代表 性 ， 我 
们 独立 地 讨论 之 ， 本 定理 的 道 定理 ， 可 参见 本 章 习 题 17 和 18. 
证 “我 们 再 次 应 用 截 尾 法 ， 引 进 两 个 新 的 随机 变量 序列 如 下 : 
U,=X,, V,=0, Fi | Xi | 二 kk， 
U,=0, V= X,» f | X, | 2k. 
显然 {UU,) 是 相互 独立 的 ， 下 面 证明 它 满足 科 尔 莫 戈 罗 夫 准则 ,令吉 三 Var(Ui)， 则 


(7. 6) 


È LEWU) = Dd) a3 f(a). (7.7) 
|x; | <4 

fal tc. 

a= >) |a | fla), (7.8) 

vis la, l<v 

则 由 ECX,) 存 在 可 知 : BBD) a, 收敛 ， 此 外 由 《7.7) 还 有 : 

m<<al 十 2a， 十 3a3 +° t ka; (7. 9) 
各 


oo oe k oo oo oo 
ASD pve = Lead p< 2a < (7. 10) 


PRL (7.2) 对 (Do > Ba. FAW 
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EW, =m = > a;f(a;), (7.11) 
la, | 一 大 
所 以 pees AT Ga Fe tet, (nou. Al, BU, IRIS AE BEA, R 
要 N 充分 大 ， 下 列 事件 的 概率 大 于 等 于 1 一 6: 
PD ES OX — n> N). (7.12) 
剩 下 的 需要 证 明 : RU, AX 以后， 同样 的 结论 也 成 立 ， 显 然 ， 为 此 只 需 证 明 : 只 
要 N 充分 大 , 事件 站 {U, 一 X,} 的 概率 就 可 以 任意 地 接近 于 L REH: (V) RA 
有 限 多 个 不 为 0 的 概率 为 |， 由 第 8.3 节 的 波 雷 尔 - 坎 特 立 引 理 ， 只 需 证 明 级 数 
2 P{(Ww 天 0} 收 敛 ， 现 在 来 证 明 此 级 数 收 但， 显然 


<< Gerth Ante Ant s. 
P{V, #0} = Dafa < es H Eees (7.13) 


因此 


> y= Da <œ, (7.14) 
定理 证 毕 . | > 


10.8 J rl 


SPV, 40)<>) f= 


Y 


1。 证 明 ; 在 第 5 节 例 Ca) PHa MTR ARSE, YA DS pR REER. 


2. 试 判 断 对 于 下 列 相互 独立 的 随机 变量 序列 {X) 大 数 定律 与 中 心 极限 定律 是 否 成 立 ? 其 中 
X 的 分 布 定 义 如 下 : 


(a) PIX = +2)=7; 

(b) PiX, = 252720, P{X;=0}=1—2-*; 

3. 李 雅 普 诺 夫 条 件 (1901). ue tne 6 二 0 有 
EC X 3 0, 


m k=l 


试 证 ， 林 德 伯 格 条 件 成 立 

4. 设 {X;} 为 相互 独立 的 随机 变量 序列 ，X 可 取 的 值 共 2 十 1 个 : 0, EL, E2L se, kL es 
且 取 每 个 值 的 概率 均 为 1 /(2k 十 1)， 试 找 出 L 满足 什么 条 件 ， 方 可 保证 (Xi) 服从 大 数 定 
律 与 (或 ) 中 心 极限 定理 . 

5. TeX, 分 别 以 概率 pi ,ps 和 1 一 2ps 取 值 ai ,一 a: M O, 试 讨论 同样 的 问题 . 
注意 . 下 面 7 个 问题 都 是 处 理 非 独立 随机 变量 的 是 弱 大 数 定 律 . 

6. 在 第 5.8 节 的 习题 13 中 ， 如 果 第 & 次 扔 出 的 结果 是 红 的 ， 则 令 X=1, BMS X50. 


1. 原著 此 处 为 5， 应 为 5 PAE 


13. 


14. 


15. 
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证 明 大 数 定律 不 成 立 . 

设 {Xi} 是 相互 独立 的 具有 同 分 布 的 随机 变量 序列 、， 旦 有 均值 y 和 有 限 的 方差 ， 令 3. 一 
Xi tee tX thik: KAGE RM RPE BSNS, } AR Boa. 如果 na 一 0， 则 (anS;} 服 从 大 
数 定律 . 提示 :计算 Var(S,…,S,)/n. 

设 {X) 是 一 个 随机 变量 序列 ， 其 中 Xi 只 与 XX:-! 和 Xi+1 相 依 而 与 其 他 的 Xi GAk l1, 
十 1) 相 互 独立 ， 而 且 {Var(Xi)) 有 界 ， 试 证 (Xi) 服从 大 数 定律 . 

如 果 对 每 个 n, (Xi ，,… Xo 的 联合 分 布 使 得 : 方差 有 界 而 所 有 的 协 方差 为 负 ， 则 大 数 定 
律 成 立 . 


.( 续 上 题 ) 把 上 一 问题 中 的 条 件 CovC(X; X< (对 一 切 7,&) 代 之 以 : joko 


Cov X; ,XX ) 一 0 一致 成 立 ， 则 大 数 定律 仍然 成 立 . 


。 如果 |S, | 二 cn H Var (S) >ar, MX) PARARI EE. 
， 在 波 利 亚 负 子 模型 中 (第 5. 2 节 例 〈e)) ， 如 果 第 & 次 抽 到 黑 球 ， 则 令 X 一 1; 如 果 抽 到 


红 球 ， 则 令 X,=0. WS, 是 n 次 抽取 中 抽 得 黑 球 的 总 数 ， 证 明 : 对 {X4} 而 言 ， 大 数 定 律 
AS UME. 


RX } 是 相互 独立 的 随机 变量 序列 ， 其 中 X 可 能 取 的 值 为 r= 二 2,3,4,…, 相 应 的 概率 为 
六 一 c /(Plog r)， 此 处 c 取 值 使 p= 二 1， 试 证 : MRS e,=c e n log log n， 则 广义 大 数 
定律 (4.1) 成 立 . 

设 {X, } 是 相互 独立 的 随机 变量 序列 、X,= 士 1 的 概率 为 (1 一 2 ")7/2,X, 一 土 2" 的 概率 为 
2 一:， 试 证 ， 对 (2 ) 而 言 ， 弱 、 强 大 数 定 律 都 成 立 . LER: 这 说 明 条 件 (5.5) 不 是 必 
要 的 . | 

不 利于 赌 徒 的 “公平 ”博弈 的 例子 ， 设 在 每 次 试验 中 赢利 的 可 能 值 为 0,2,2 ,2 ，… 赢 利 
为 2* 的 概率 为 


l 
= meei b > 5 + 
Fr 2b (k+1)? (k 1) 3 1) 


in BAA A O 的 概率 为 各 一 1] 一 (如 十 pete). 赢利 的 期 望 为 
p= D2 p= A-SI t ZAG, (8. 2) 


规定 每 次 试验 赌 徙 需 付 的 人 场 费 为 1， 于 是 次 试验 后 ， 他 所 得 的 净 赢 利 〈 或 损失 ) 为 
S—n. tik: WHO. n 次 试验 后 ， 赌 徒 的 损失 超过 (1 一 e)n /Logn 的 概率 趋 于 1， 
此 处 Logan 表示 以 2 为 底 的 对 数 . 即 是 要 证 


p{S ,en 


Loge n 
提示 : 利用 第 4 节 中 的 截 尾 法 ， 不 过 要 用 n/log: n RRE (4.2) HAIFA n Logn. 证 明 
U, =X, 对 所 有 下 魏 ”成立 的 概率 趋 于 1， 并 证 明 


se (8.3) 


P{ |U, ++ +U, —nEWU)) |< \_+o], (8. 4) 
og: n 
1 Ite 
=> m , 
1 一 ane EU) 1 Domn (8.5) 


EA 67]. 
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16. 


17. 
» RRR REM Sw. WR Lok /k’ 发 散 ， 则 存在 方差 为 Var(Xi) 二 oi 的 相互 独立 的 随 


设 {X,) 是 相互 独立 且 具 有 同 分 布 的 随机 变量 序列 ， 但 X, 不 具有 有 限 的 期 望 ， 令 A 为 正 
常数 ， 试 证 ， 在 事件 列 {|X, | 二 An,n 二 1,2,…} 中 有 无 穷 多 个 发 生 的 概率 为 1. 
强大 数 定理 之 北 ， 在 习题 16 的 假定 下 ，|S, | 之 An 对 无 穷 多 个 n 成 立 的 概率 为 1. 


机 变量 序列 {X}， 使 得 对 此 序列 强大 数 定律 不 成 立 ，〈 提 示 : WERA p| X | 二 
e 7) 收 合 是 强大 数 定律 成 立 的 必要 条 件 . ) 
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11.1 概 论 


在 离散 随机 变量 中 ， 只 取 整 数值 二 0,1,2,… 的 随机 变量 特别 重要 . 母 函 数 方 法 
促进 了 对 它们 的 研究 ， 我 们 将 会 看 到 ， 此 方法 系 特征 也 数 方法 的 特殊 情形 ， 后 者 在 
概率 论 中 起 着 重要 作用 ， 更 一 般 地 说 ， 母 图 数 方法 属于 在 微分 方程 与 积分 方程 中 三 
为 应 用 的 算 子 方法 的 领域 ， 自 棣 莫 弗 和 拉 普 拉 斯 以 来 ， 母 图 数 方法 在 概率 中 就 有 应 
用 ,但 其 功效 和 和 潜力 远 未 充分 发 挥 . 

定义 令 aoyaiyaz，… 是 一 个 实数 序列 ， WR 

A(C) 一 au 十 as 十 as 十 … (1.1) 
在 某 个 区 间 一 5 过 s 过 so HUSK, WH ACS) ERT (a; } POR BK, 

变量 本身 并 无 意义 .如 果 {a} 是 有 界 的 ， 与 几何 级 数 比 较 可 知 : d. D BOE 
ls} KIA WK. 

例 “如果 wa=1 对 一 切 j Mar. W AGS s). (0,0,1,1,1,°°) ARERR 


为 /1 一 9)， 序 列 {a =N 的 母 函数 是 ec. n 1% 一 人 7)| 的 母 函数 是 
(1 十 9)"”， 如 果 X 是 掷 一 颗 均 匀 的 骨 子 出 现 的 点 数 ， 则 其 概率 分 布 的 母 晒 数 是 (5s 十 
?十 十 十 十 )/6. > 
尾 概率 分 布 的 记号 如 下 : 


P{X=)}=p;, P(X >j) =q. (1.2) 
则 
= Piri Perot k20. (1. 3) 
{ p;) Al qe} AYES PRT BWA : 
PC =p pis ps tpt, (1.4) 
QC =g tqs tHg tgs 十 …. (1.5) 


由 于 P(1) 王 1， 所 以 P(D 至 少 在 一 1 和 ss 委 1 上 绝对 收 伊 ，Q(s) 的 系数 都 小 于 1， 所 以 
Q(s) 至 少 在 开 区 间 一 1<s <1 内 收敛 . 
定理 1 对 于 一 1 过 ss 过 1， 有 
1— PCs) 


QCs) = 1 一- 
证 (1—s)QCs) P s” 的 系数 当 7 =] 时 为 Gn Gn-1 =— p, 和 当 n=0 时 为 qo = pı + 


(1. 6) 
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pote =1—p. 故 (1 一 9)QGCS) 三 1 一 P(S)， 和 定理 证 毕 . > 
下 面 我 们 研究 导数 : 


P’(s) = Dy kpis™. (1.7) 
此 级 数 至 少 在 一 1 二; <1 AA. MF s 二 1， 右 边 化 为 2kpi 二 EC(X)， 当 此 期 望 存在 
时， 导数 PCs) 在 一 1 过 ;过 1 上 上 连续， 如 果 2kps 发 散 ， 则 当 :一 1 时 P’(s) co, TEX 
种 情况 下 ， 我 们 说 和 具有 无 穷 的 期 望 值 并 写作 P ASE =. (因为 所 有 的 数 都 
是 正 的 ， 使 用 符号 ce 不 会 出 问题 . ) 在 (1.6) 右边 的 分 子 上 应 用 中 值 定理 ， 可 得 ， 
Qt(s)= 王 Po)， 其 中 是 * 到 1 之 间 的 一 个 点 ， 由 于 此 两 施 数 都 是 单调 的 ， 所 以 ， 它 
们 有 相同 的 有 限 或 无 穷 的 极限 ， 记 之 为 P (1) 或 QG1)， 这 就 证 明了 : 

定理 2 期 望 下 (X) 满 足下 列 关 系 : 


E(X) = S) jp; 一 > de 《1]1. 8) 
j=l k=0 
SAP AMARTH, LEXAR 
ECX)=P’(1) =Q(1). (1.9) 
微分 (1.7) 和 关系 式 P(s)= 二 QCs) 一 (1 一 s)Q (s)， 用 同样 的 方法 可 得 : 
ECX(X—1)) = kk)p=P()=2Q (1). (1. 10) 


为 了 得 到 Var(CX) ， 我 们 必须 把 上 式 两 边 同 时 加 上 EOO-E (CX), Mate: 
定理 3 我 们 恒 有 
Var(X)=P(1)+P (1)— [LP OO) F 
=2Q (1) +Q(1) -Q (1). (1.11 
如 果 方 差 无 穷 , 则 当 s—1 时 P's) 00. 
关系 式 (1.9) 和 (1.11) 经 常 提 供 计 算 EC(X) 和 Var(X) 的 最 简单 的 方法 . 


11.2 卷 积 


设 X 是 一 个 仅 取 非 负 整 数值 的 随机 变量 ， 则 s* 是 一 个 有 定义 的 新 的 随机 变量 ， 
而 且 X 的 分 布 的 母 函数 可 简写 为 E(s*)， 若 X 和 了 是 相互 独立 的 随机 变量 ， 则 s 和 
s” 也 是 相互 独立 的 ， 所 以 

ECY) =E(s*) ECs’). 
我 们 再 给 此 重要 结果 以 另 一 证 明 ， 因 为 它 可 引出 一 个 非常 有 用 的 推广 . | 

设 X 和 立 是 相互 独立 ， 都 是 取 非 负 整数 值 的 随机 变量 ， 它 们 的 概率 分 布 分 别 为 ; 
P(X=j)=a;,P{Y=j} =b. 事件 {X=;,Y 一 k} 的 概率 为 ajr. 和 S=X+Y 是 一 个 新 
的 随机 变量 ， 而 且 S=r 是 下 列 互 太 事件 之 并 : 

{X=0,Y=r}), {X=1,Y=7r—1),…,(X=r,Y=0}. 
PRU, 分布 c, = P{S=r} AH RAB: 
c. =b, Fabi 十 ap be Tanib tabo. (2.1) 
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由 两 个 序列 (as} 和 和 12 导出 的 新 序列 (ce 的 运算 经 常 出 现 ， 所 以 ， 为 了 方便 起 见 ， 
给 它 一 个 特殊 的 名 称 与 记号 . 
定义 设 {a) 和 {bi) 是 两 个 数列 (不 一 定 是 概率 分 布 )， 由 (2.1) 定义 的 新 序列 
{ce} 称 为 (qi} 和 1b;) 的 卷 积 ,并 表 之 为 ; 
(Cet 5 {aa} * ibr). (2. 2) 
例 DWR a=b =1 MY k 0 都 成 立 ， 则 aSk. Ai ak, b =l, Wi 


a= l +2 ttk kl k+ 1)/2. 最 后 ， 若 ay=a => H k &2 时 a, = 0, mij Ch — 


(bi 十 bi-1)/2。， 等 等 . > 
序列 {a,) 和 {65,}) 的 母 函数 分 别 为 A(s) 二 ars* 和 B(s) 二 6b1s*. FEF ACs) BCs) A 

以 由 ACs) Al BCs) FER BEA MSS. AH s 的 响 次 相同 的 各 项 ,我 们 发 现 . 

ACS) BOs) MBAR, s 的 系数 c, 由 (2,1) 给 出 ， 因 此 我 们 有 下 述 定 理 . 

EE PF) (a, Fold, BAF A ACs) Fe Bos), fe} ECM BAR, WA 
mee Cl) = Dias” 是 乘积 : 

C(s)=A(s) BCs). (2. 3) 
车 X 和 了 是 相互 独立 的 仅 取 非 负 整 数值 的 随机 变量 ， 它 们 的 母 水 数 分 别 为 A(s) 和 
BCs). MAp XHY HAARA AGBC). 

MES far) (blaid BEREAN. RATE AIEE a) * rho 
然后 把 这 个 新 序列 再 与 {c) 作 卷 积 ， 等 等 (ai) * (Di) * {Cap X íd, 的 母 图 数 为 
A(s)B(s)C(s) DCs)» SX AAA EAB AR IRAP IER. PYG, Car) x* {br} * (ce? 二 cr? * 
{5,) x {a )， 等 等 ， 因 此 ， 卷 积 是 一 种 可 结合 可 交换 的 运算 《与 随机 变量 的 求 和 完全 
一 样 ). 

在 研究 独立 随机 变量 X, 的 和 时 ，{X,) 具 有 同 分 布 的 特殊 情况 特别 重要 .如 采 
(aj) 是 {X,}) 的 同 概率 分 布 ，S, 王 XX 十 … 十 X, MPRA {a 表示 的 话 ， 则 有 

lat = {a} x dada) Sta)?" * tater (2.4) 
一 般 地 ， 
(a) = {aj pi" * * Lat. (2.5) 
用 语言 表示 ，{fa ) ARS BRA ACS) 的 数列 .特别 地 ，ia; i Eia), ap" 
CLARE BRA A (S)=1 的 数列 ， 即 是 序列 《〈1,0,0,0，…)， 


例 DEAR. MA bein p)= (7 pha” A BON 


T (aa = at ps)" (2. 6) 


k=0 


十 述 母 函数 是 g 十 ps 的 n KIR: bkin, p)) KE n MEIRA 23 8 BY BL 


1. 有 些 作 者 喜欢 用 德 文 faltung; 英文 为 convolution; 在 法 语 中 ， 与 之 等 价 的 词 是 composition. 
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FEZA S, =X te +X, 的 分 布 ， 其 中 每 个 随机 变量 Xi 均 以 概率 g Ap 取 值 0 和 
1， 其 母国 数 为 qt ps. PT 
(OCR pp ={bles1,p)}”". (2.7) 

HARKS, =X, 十 … 十 X, BAMA. LENS 9.3 节 例 Ca) 和 第 9.5 节 例 Cad] 颠倒 
上 述 推 理 可 得 二 项 分 布 的 另 一 推导 方法 ， 由 可 乘 性 (gt ps” (qt ps"= (qt ps)" 
推出 : 

{Ok;yrm pp)} * (bCksn, p) ={blk;mtn,p)?. (2. 8) 
这 就 是 第 6 章 (10.4)， 微 分 (qt ps)” 可 得 到 EE(S,) 二 np 和 Var(S,) 一 npgq 的 一 种 简 
单 证 明 . 

(c) 泊 松 分 布 ， 分 布 pka =e etk! 的 母 函数 为 


a 


k 
Sen 42 一 ew (2.9) 


由 此 推出 : 
(pCksa)} * (pki) =p kA tyh. (2. 10) 
这 就 是 第 6 10.5). 微分 之 ,我们 再 一 次 发 现 泊 松 分 布 的 均值 和 方差 都 是 ,上 [ 参 
见 第 9. 4 WB Co) | 
(d) 几 何 分 布 与 负 二 项 分 布 . 令 X 为 具有 下 述 几 何 分 布 的 随机 变量 : 


P{X=k};}=gp, k=0,1,2,:， (2. 11) 
此 处 ppg 是 满足 pp 十 g 二 1 的 正 数 . X 的 母 函 数 为 : 
p> (gs) =P, (2.12) 
b=0 1 — qs l 


利用 第 1 节 的 结果 ， 容 易 求 得 ENX) S=q/p:Var(X)=q/P. RSIR 9.3 TA Cc) TE 
得 的 结果 一 致 . 

在 伯 努 利 试验 序列 中 ， 怡 在 上 次 失败 后 第 1 次 出 现成 功 〈 即 是 第 kti 次 试验 出 
现 第 1 次 成 功 ) 的 概率 是 gp， 故 六 可 以 解释 为 : 第 1 次 成 功 出 现 所 需 之 等 待 时 间 . 
严格 地 说 ， 这 种 解释 需要 参考 - -个 无穷 的 样本 空间 ， 形 式 地 定义 (2.11) 和 随机 变 
量 的 概念 的 优点 在 于 ， 我 们 不 必 担 心 原始 的 样本 空间 的 构造 ， 以 上 所 述 ， 对 第 r 次 成 
功 所 需 之 等 待 时 间 也 对 . 设 义 , 表示 第 & 一 1 次 成 功 到 第 次 成 功 之 间 失 败 的 次 数 ， 则 
S =X +X, +: t+ X, 是 第 r 次 成 功 前 失败 的 总 次 数 MA S, tr 是 直到 出 现 第 r 次 
成 功 时 ， 所 需 的 试验 次 数 )， 伯 努 利 试验 的 定义 要 求 : {Xs} 相 互 独立 且 具 有 同 分 布 
(2.11) ， 并 且 我 们 可 以 用 此 性 质 定义 X. MA S HERSO: - 


(2). (2.13) 
] — qs 
第 2 章 (8.7) 的 二 项 展 式 说 明 : Y 的 系数 等 于 

firs py=( "pa k=0, 1,21, (2. 14) 


hirie: PIS, =k =fr p), XS 6.8 节 所 推出 的 第 > 次 成 功 之 前 失 几 次数 
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的 分 布 是 一 致 的 ， 此 结果 可 复述 如 下 : Skr bp) 是 几何 分 布 本 身 的 > 重 着 积 ， 用 
符号 表示 ， 即 

{flk;r,p)})={gp}™. (2. 15) 

到 目前 为 止 ， 我 们 所 讨论 的 > 都 是 整数 ， 但 是 ， 在 第 6.8 节 中 我 们 就 曾 指出 ， 当 

7 之 0 不 是 整数 时 ，{f(k;r,p)) 定 义 出 负 二 项 分 布 ， 其 母 孙 数 仍然 由 (2.13) 所 定义 ， 
MAME r 法 0， 负 二 项 分 布 的 均值 与 方差 分 别 为 rg/p 与 rg/p ， 此 外 还 有 

{flksr ,py x {fin pPjs=t{ fin trsp)). (2. 16) 

(e) JAK. TER 10.6 节 例 (b) 中 ， 我 们 曾经 研究 过 个 元 素 的 随机 排列 中 的 循环 的 个 数 

S, HAEA: 此 随机 变量 可 以 表示 为 n MARRY LEB ZAMS, HX tee tk, A 

中 每 个 X. 都 只 能 取 两 个 值 1 和 0， 对 应 的 概率 分 别 为 (x 一 十 1) Ck) Ca ktl). h 

此 立 得 S, AR RRE PERR.: 


n—l+s n—2+s 1+s S _,_yyn,f 75 
E es aD y) 


此 多 项 式 的 系数 决定 了 S, 的 概率 分 布 ， 但 其 精确 表示 式 却 要 求 斯 特 林 数 的 知识 ， 此 处 ， 我 们 
得 到 -个 例子 ， 其 母 函 数 比 其 概率 分 布 简单 得 多 . 由 此 可 见 : 从 母 函 数 中 可 以 获取 许多 重要 
信息 . > 
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现在 ， 暂 不 讨论 母 函数 方法 的 有 效 性 和 灵活 性 ， 转 而 讨论 几 个 具有 方法 论 意 义 
的 重要 问题 ， 其 结果 在 随机 徘徊 中 扮演 着 极 突出 的 角色 ， 并 可 考虑 为 扩散 理论 中 的 
相关 的 结果 的 原型 ， 它们 将 在 第 14 章 中 用 不 同 的 方法 导出 〈 特 别 地 ， 人 参见 14. 4 节 和 和 
14. 9 节 )， 对 于 p=1/2 的 特殊 情形 ， 其 结果 在 第 3 章 中 ， 曾 用 组 合 方法 的 不 同形 式 
导出 过 .不 同方 法 的 比较 是 有 局 发 的 . 

下 面 考虑 具有 成 功 概率 为 p 的 伯 努 利 试验 ， 如 果 第 次 试验 的 结果 是 成 功 则 令 
X,=+1, GMA X, 二 一 1， 换 名 话说， 我们 研究 的 对 象 是 一 列 相 互 独 立 的 随机 变 
量 ， 其 中 每 个 随机 变量 都 只 能 取 十 1 或 一 1， 相 应 的 概率 分 别 是 p 或 9， 这 种 档 述 既 
简单 又 自然 ， 但 是 ， 由 于 它 参 考 着 一 个 无 终止 的 试验 序列 ， 形 式 上 导出 一 个 无 限 的 
样本 空间 ， 实 质 上 ， 我 们 仅仅 要 计算 那些 涉及 有 限 次 试验 的 概率 ， 所 以 ,实际 上 不 
会 产生 问题 ， 我 们 可 以 说 : 固定 试验 的 次 数 N， 然 后 令 Nooo, ARAM A ke, 
而 且 不 利于 概率 直观 . 

像 通 常 一 样 ， 令 


(2.17) 


S =X, be +X, (4 n >1), S =0. (3.1) 
用 习惯 的 赌博 语言 ， 甲 、 乙 其 方 参加 一 场 赌博 ， 每 次 赌注 为 1， 旦 令 S, 是 甲 在 
第 n 次 试验 后 所 获 的 累积 赢利 ， 用 随机 徘徊 的 术语 来 说 ， 当 一 个 “质点 ”每 隔 一 个 


1. 显然 ， 诚 如 所 述 ， 此 节 插 进来 的 目的 是 为 了 展示 其 内 在 的 意义 ， 而 不 是 为 本 书后 半 部 分 做 准备 . 
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单位 时 间 就 向 右 或 向 左 移动 一 步 ，S, 就 是 该 质点 在 时 期 所 处 的 位 置 ， 如 果 j 基 广 ， 


那么 此 随机 徘徊 是 不 对 称 的 . 
(a) 一 个 单位 的 赢利 所 需 的 等 待 时 间 ， 用 赠 博 的 语言 来 说 ， 事 件 : 
S,)X0,°,S,-,<0, S,=1 (3. 2) 
Fen EGE FE n RIG 1 次 获得 正 的 累积 赢利 .用 随机 徘徊 的 术语 来 说 ， 第 nn 步 
才 第 1 次 访问 十 1， 用 更 专业 的 物理 中 的 扩散 理论 的 语言 来 说 ， 称 (3.2) 是 初 过 1. 
下 面 要 求 此 事件 的 概率 风 ， 更 精确 的 说 ， 要 求 它 们 的 母 男 数 : 


O(s) = > 4,5", (3. 3) 


为 方便 起 见 !?， 令 册 王 0， 由 定义 知 册 三 如 WR 3.2) WEA n >l hy, M S =l, 
而 且 存 在 一 个 最 小 的 下 标 v <n 使 S$,=0， 最 初次 试验 的 结果 可 以 用 赌博 的 霹 言 搞 述 如 
TF: O 第 1 次 试验 ， 赌 徒 甲 输 了 1 个 单位 ，(2〉 紧 接着 的 wv 一 1 次 试验 ， 甲 一 直 处 于 箱 
的 状态 ，(3) 接 下 来 的 n 一 v 次 试验 ， 使 甲 获得 正 的 净 赢 利 ， 这 三 个 事件 所 依赖 的 试验 次 
数落 在 的 区 域 是 不 秋 交 的 ， 所 以 这 三 个 事件 是 相互 独立 的 .由 定义 易 知 : 事件 (2) 和 
(3) 的 概率 分 别 为 &_ ,和风 ， 因 为 事件 (3.2) 发 生 当 且 仅 当 事 件 (1) 一 (3) 对 某 个 < 
都 发 生 ， 对 所 有 正 的 v 求 和 得 : 

$, = Ql, ¢,, -2 + $.$,-3 Fe +$,-2% ). (3. 4) 
注意 : ERIX n >l ar, MAA=p, &=0. 把 (3.4) RAS, HA n=2,3,-° 
求 和 ， 左 边 等 于 @(s) 一 ps， 右 边 圆 括号 内 的 量 是 卷 积 (加 ) «(60 nl, BA 
2 节 的 定理 知 右边 等 于 gs， 玫 (5)， 所 以 母 函 数 四 满足 二 次 方程 式 : 


(5s) — ps= qs (s). (3.5) 
其 两 个 根 中 的 一 个 在 s = 0 附近 是 无 界 的 ， 故 母 函 数 是 下 述 的 惟一 的 有 界 解 : 
pes) =v tbs ea (3. 6) 
此 处 V 表示 正 根 、 由 第 2 章 (8.7) 的 二 项 展 式 ， 其 系数 可 以 写成 下 述 形式 ， 
| ji 
(1 Do k — 

Op— 1 2q | A [co 9 pa =0, (3. 7) 
因此 ， 我 们 得 到 了 所 要 求 的 概率 的 精确 表达 式 ， 但 是 ， 这 是 第 二 位 的 ， 而 最 感 兴趣 
的 是 直接 从 母 函 数 获 取信 息 . 

首先 注意 ， 之 风 由 下 式 给 出 : 


p= Eaa, (3. 8) 


L 正如 下 面 我 们 见 到 的 ， 母 函数 中 可 以 通过 一 段 简单 的 概率 推理 来 得 到 .下 面 给 出 一 个 不 很 典范 的 推导 ， 
因为 它 对 处 理 卷 积 方程 提供 了 一 个 很 好 的 练习 ， 此 法 在 许多 概率 论 以 外 的 学 科 中 也 出 现 〈 可 看 习题 6)， 
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从 而 
_p/qs 4 p<a; 
2 多 1， 3% pa. (3. 9) 
所 以 S, 迟早 要 变 为 正 的 概率 为 1. 时间 到 底 要 多 长 ? 简单 的 计算 可 得 :如果 pp >q, 


M DSO; MR p=q=5° WO (1) 二 oo， 由 此 得 出 结论 : 当 p 一 让 时 ， 
和 S, 初次 为 正 的 试验 次 数 的 期 如 为 co， 

再 用 赌博 语言 来 复述 这 一 漂亮 的 结果 是 值得 的 .此 结果 揭示 : 在 据 -- 个 均 习 的 
硬币 的 赌博 中 ， 理 论 上 说 ， 赌 徒 甲 迟 早 总 会 获得 正 的 净 帮 利 ， 但 是 要 达 此 目的 ， 所 
需 试验 次 数 的 期 望 是 ce， 一 个 只 有 有 限 赌 本 的 赌 徒 ， 理 论 上 说 ， 不 一 定 能 获得 正 的 
净 赢 利 、 在 第 14 章 的 破产 问题 中 ， 我 们 还 要 回 过 头 来 联系 此 问题 进行 讨论 . 

关于 于 的 二 次 方程 〈3.5) 的 推导 ， 可 以 用 下 述 更 概率 化 的 术语 来 叙述 . 令 N 是 使 Sv 二 0 
的 第 1 个 下 标 , M N 是 一 个 稍为 广义 的 随机 变量 ,此 NN 在 5S, 志 0 对 一 切 n 成 立时 没有 定义 . 
(用 第 13 章 的 术语 ， 我 们 称 N A “ELKA” (defective) 随机 变量 . ) OCS MRR 
fe, OZE). wÆ X,=—1, WN=1+N,+N,, Hab Ni 是 使 部 分 和 S, 由 一 1 上升 到 0 
所 需 的 试验 的 次 数 ， 而 N: 是 后 续 的 使 之 由 0 到 1 所 需 的 试验 的 次 数 ， 这 些 随机 变量 是 相互 独立 
的 ， 而 且 它 们 的 分 布 与 N 的 分 布 相同 ， 因 此 ，s 的 条 件 期 望 为 

ECsN |X)=—1)=EC NiN | X=—1)=s® (s), 
ECG" IX S1) Ss, 
但 是 
ECN) = pE(s% |X, =1)+qEG"|X:=—-1, (3. 10) 
由 此 可 得 (Cs) =ECs™ ) 满 足 二 次 方程 (3. 5). 

(b) 返 回 平衡 ， 当 S,=0 时 ， 累 积 成 功 次 数 与 累积 失败 次 数 在 第 下 次 试验 出 现 了 
一 次 均等 ， 借 用 扩散 理论 中 一 个 术语 ， 此 事件 可 描述 为 一 次 返回 平衡 ， 这 要 求 试验 
的 次 数 必 为 偶数 ， 而 且 在 第 2n 次 返回 平衡 的 概率 为 ， 


l 
ov- 2 | (4pq)". (3.11) 
Ffi 
由 第 2 (8.7) HOMBRE RAH: 
U(s) = Dy Hons — es | (3. 12) 


注意 : {uw} 不 是 概率 分 布 ， 因 为 返回 平衡 是 可 能 多 次 重复 出 现 的 . 

(c) 初 次 返回 平衡 发 生 在 第 22 次 试验 ， 当 和 且 仅 当 Ss 二 0, 但 Si 关 0,k 二 1,2,*…， 
2n 一 1， 令 此 事件 的 概率 为 fon (当然 for) =O.) 考虑 分 别 满足 X, 二 1 和 Xi 三 一 1 的 
两 个 子 事件 ， 并 记 它 们 的 相应 的 概率 为 成 和 f%， 如 前 面 的 (a〉 中 所 述 ， 显 然 有 : 
所 二 g $1. (因为 前 面 2n 一 2 个 部 分 和 X 十 X 十 … 十 和 都 小 于 等 于 0， 而 其 后 的 部 
分 和 是 正 的 . ) 因 此， 应 用 (3. 6) 可 得 : 
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F-(s) = >) fos” = gls) = L vts (3.13) 
由 对 称 性 ，{ 广 ORR IE ERE pAg 的 位 置 互 换 一 下 就 可 得 到 .由 
此 推出 ， F =F, 从 而 最 后 有 : 
Fos) = >) fas" 一 1 一 vV1 一 4zs (3. 14) 


有 些 有 趣 的 结论 可 以 不 用 fa 的 精确 表达 式 来 SA. BR, FOÆ— KIR EEE 
迟早 要 发 生 的 概率 ， 因 为 FO)=1—lp-q¢l, Br | P q | 是 平衡 永 不 出 现 的 概率 ， 


发 生 ， 在 这 种 情况 下 ，{f,} 代 表 初 返 的 等 待 时 的 概率 分 布 ， 此 等 行 时 的 期 绥 为 02. 
在 p 一 三 的 对 称 的 情形 下 ， 有 


Us) = (3. 15) 
由 于 U 和 下 都 是 ? 的 寡 级 数 ， 此 关系 与 〈1 6) 仅仅 是 符号 上 的 差异 ， 由 定理 1.1 还 有 : 
tion = font F Sonra ve (3. 16) 


用 语言 表述 ， 即 当 p= 少时 ，So 一 0 的 概率 等 于 2n 个 部 分 和 Si，…,So 都 不 是 0 的 概 


率 ， 在 结果 曾 在 第 3 章 用 不 同 的 方法 推出 过 ， 并 在 扎 硬 币 的 随机 起 伏 中 的 反常 的 性 
质 的 分 析 中 起 过 基本 的 作用 . 

(d) 初 过 与 后 返 . wR hk <n, RWA Sr 42 S,5r, 则 说 在 第 nn 次 试验 初 
过 ->0， 用 ? 表 此 事件 的 概率 ， 初 过 v0 以 后 的 试验 ， 构 成 了 整个 试验 序列 的 一 
个 概率 拷贝 ， 因 此 ， 初 过 v 以 后 到 初 过 "十 1 的 试验 次 数 ( 包 含 到 v 十 1 的 那 一 次 试 
验 ) 的 分 布 与 初 过 1 的 分 布 {加 ) 一 样 ， 当 pp 二 q 时， 把 各 加 起 来 不 等 于 1， 但是， 我 
们 说 初 过 的 等 待 时 是 一 个 具有 “可 能 是 定义 不 全 的 ) 分 布 (加 ) 的 随机 变量 仍然 是 有 意 
义 的 .接连 的 几 个 初 过 的 等 待 时 是 相互 独立 的 ， 所 以 初 过 的 总 等 竺 时， 是 -个 相互 
独立 的 具有 同 分 布 { 风 } 的 随机 变量 之 和 .， 初 过 的 概率 分 布 { 风 ' } 的 母 函 数 为 ”| 为 
验证 此 结论 ， 首 先 直 接 推 出 几 满足 类 似 (2.4) 的 卷 积 方程 ， 然 后 用 归纳 法 . J 

对 于 第 + 次 返回 平衡 发 生 在 第 n Ki RESO. AAEM. Sa 
BHAA F. KH (3.6) 和 (3. 14) 我 们 立即 发 现 ; 

= (2q)"¢,",. (3.17) 


对 p= 二 q= 方 的 特殊 情形 ， 此 结果 包含 在 第 3.7 节 定理 4 中 


由 母 函 数 出 发 ， 很 容易 推 得 到 近 式 和 极限 定理 ， 但 这 依赖 拉 普 拉 斯 变换 ， 而 拉 普 拉 斯 变 
换 要 在 第 二 卷 书 第 13 章 才 讨论 ， 没 有 系统 的 方法 从 母 函数 下 "推出 fs” 的 精确 表达 式 , BE, 


1. 另 一 种 推导 ， 将 在 第 13.4 节 例 Cb) 中 给 出 . 
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由 母 裔 数 很 容易 验证 对 O 的 猜 估 ， 由 第 3 章 第 7 节 定 理 4， 我 们 猜测 ; 
= ( MTT) or por. (3. 18) 
为 了 验证 这 一 猜想 ， 只 需 注意 下 列 等 式 : 
F’(s)=2F"'(s)—4pqs’ (5) 

蕴涵 了 下 述 递 推 关系 ， 

fin =2f? —4pafs-? » (3. 19) 
此 关系 (3.18) 右边 也 满足 ， 因 此 ， 由 归纳 法 可 知 (3. 18) 正确 ， 一 个 外 表 不 同 的 实质 等 价 
的 表达 式 将 在 第 14. 9 节 习 题 13 中 给 出 . 


11.4 ”部 分 分 式 展开 


给 定 母 函数 P(s) = >, bas" ， 其 系数 入， 可 以 通过 微分 从 此 明显 公式 p= 


Pw (0)/RI 而 得 到 .在 实际 中 ， 不 大 可 能 得 到 其 精确 的 表达 式 ， 不 管 怎样 ， 这 类 通 前 
很 复杂 的 表达 式 ， 找 出 其 合理 的 逼近 也 是 可 取 的 ， 获 得 此 类 逼近 的 最 常用 的 方法 是 
部 分 分 式 展开 ， 众 所 周知 ， 由 复 变 函数 知识 可 知 ， 有 一 大 类 函数 可 以 这 样 展 开 ， 但 
是 ， 我 们 仅 用 于 一 类 较 简 单 的 函数 一 一 有 理 函 数 . 

AU, BE BE pR I On : 


_UCs) 
PS) = ye $ (4, 1) 


此 处 UU 和 V 是 两 个 没有 公共 根 的 多 项 式 . 为 了 简单 起 见 ， 首 先 假定 U 的 阶 比 Y 的 阶 低 ， 
wU 的 阶 为 rh, 进一步 ， 再 假定 Vis) =0 A m 个 不 同 的 实 根 或 虚 根 . Sa 9 S29" s Sme y 则 


Vs) =Cs— 8, ) Cs s) te Cs Sm) s (4.2) 
由 代数 可 知 PC(s) 可 分 解 成 下 述 部 分 公式 : 
P(s) =O SY ， (4. 3) 
SS, SSS Sp S 


此 处 ， Pr 22 97°" a Dn 都 是 常数 . 为 了 得 到 o, 把 (4, 3) HEV (s—s,). HS S—* S15 HE FA PCs) 
G—s)7o, AA. 从 (4.1) 和 (4.2) 有 
—U (s) 


(8) 9 POI = ToT Gas, Jens, ) 


在 上 式 中 令 ;>s ， 右 边 的 分 子 趋 于 一 U(s, )， 而 分 母 趋 于 (5 一 $6) 一 83)…(51 一 $m)， 这 
就 是 V (5)， 因 此 pp 二 一 UCs)/V(s)， 对 其 余 所 有 的 根 ， 亦 可 应 用 类 似 推 理 ， 所 以 对 一 
YJ k Sm, 有 


(4.4) 


o =U Csr) /V Cs). (4.5) 
给 定 o:， 可 以 容易 地 推出 P(s) 中 的 ”的 系数 的 精确 表达 式 ， 记 
l l l 


l. t 4. 6 
一 5 $s 1~—s/s (4.0) 
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对 于 1s| 过 |s ， 把 上 式 中 最 后 一 个 分 数 展 成 几何 级 数 ; 


] 2 3 
=a (=) +(=) “eee, (4.7) 
把 此 展 式 引入 (4.3), AE sv MRA p, 如 下 : 


pata teat tae. (A. 8) 
5] So Sm 


因此 ， 为 了 获得 p,， 首 先 必须 找 出 分 母 的 根 soes RH (4.5) 决定 系 
KU o sOn. 

te (4.8) 中 ， 得 到 了 概率 p, 的 精确 表达 式 ， 算 出 全 部 m MRTE RA A E 
很 大 的 ， 因 此 公式 4.9 实际 上 只 有 理论 价值 ， 幸 运 的 是 ，(4.8) 中 的 一 项 经 常 就 
提供 了 满意 的 逼近 . EKE, 假定 s 是 按 绝对 值 来 说 最 小 的 根 ， 那 么 4.8) 的 第 一 
个 分 母 就 是 最 小 的 ， 显 然 ， 当 nn 增加 时 ， 其 他 各 项 所 占 的 比例 递减 ， 而 第 一 项 起 主 
要 作用 ， 换言之， 如 果 s 是 V(s) 二 0 的 根 中 按 绝 对 值 来 说 是 最 小 的 ， 则 当 了 一 ce 时 


b~, (4.9) 
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(符号 一 表示 两 边 之 比 趋 于 1)， 甚 至 对 相对 而 言 较 小 的 2， 上 式 提 供 的 逼近 都 是 很 好 
的 ， 上 式 的 主要 好 处 在 于 : 它 只 需 计算 代数 方程 的 一 个 根 . 

容易 去 掉 在 获得 近似 公式 (4. 9) 时 所 加 的 限制 首先， 允许 〈4.1) 中 分 于 的 
价 可 以 超过 分 母 的 阶 mm。、 假 定 DC) 的 阶 为 mm 十 rCr 关 0) 用 除法 ， 可 以 把 P(s) 化 为 一 
个 r+ 阶 的 多 项 式 加 一 个 分 数 U (3)/V(s)， 其 中 加 (3) 是 一 个 低 于 m 阶 的 多 项 式 ， 此 多 
项 式 仅 仅 影响 分 布 {p,} 的 前 面 的 r 十 1 项， 而 Ui(s)/V(s) 可 以 如 前 展 成 分 部 分 式 ， 央 
此 (4.9) 还 是 对 的 ， 其 次 ， 关 于 VCs) 只 能 有 单 根 的 限制 也 是 不 必要 的 .由 代数 学 知 
识 知 道 每 个 有 理 函 数 都 可 以 展 成 部 分 分 式 ， 如 果 s 是 V(s) 的 一 个 重 根 ， 那 么 ， 部 分 
分 式 展 式 (4. 3) 将 包含 一 个 形 如 a /(s 一 s$.)* 的 附加 项 ， 而 此 项 将 在 关于 p, 的 确切 
Fest (4.8) 中 增加 形 如 al(nt1)s t? 的 一 项 ， 然 而 ， 这 并 不 影响 渐 近 式 (4.9) 
(ABs 是 单 根 )， 我 们 将 此 结果 写成 如 下 定理 以 备 将 来 参考 . 

定理 ”假定 PC(s) 是 一 个 有 理 函 数 ， 其 分 母 有 一 个 单 根 5, MH s 按 绝 对 值 来 说 是 所 
有 的 根 中 的 最 小 者 ， 则 8 的 系数 p WALA pros, abo 由 《4.5) RMEL. 

当 s 是 重 根 的 时 候 ， 类 似 的 渐 近 式 仍然 存在 . 〈 见 习题 25. ) 

例 (aa, 是 n 次 伯 努 利 试验 中 共 出 现 偶数 次 成 功 的 概率 ， 此 事件 的 发 生 有 
两 个 可 能 ,第 1 次 试验 失败 而 其 后 的 n 一 1 次 试验 出 现成 功 的 次 数 为 偶数 ; 第 1 次 试 
验 成 功 而 其 后 的 n 一 1 次 试验 出 现成 功 的 次 数 为 奇数 . 因此 ， 对 ?之 1 有 

a, = qa, 1 十 力 ( 1 — an) Ay =l. (4, 10) 
把 上 式 乘 以 ”再 对 2 王 1,2,… 求 和 ， 得 下 述 母 蚊 数 天 系 : 


1. 在 第 13. 7 节 的 成 功 连贯 的 理论 中 , 将 对 部 分 分 式 在 数字 逼近 中 的 应 用 作 一 个 很 好 的 解释 .第 14.5 
节 连 贰 概率 的 精确 表达 式 ， 第 16. 1 节 中 的 转移 概率 ， 都 依赖 于 部 分 分 式 方法 ， 
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A(s)—~1=qsA(s)+ ps(.1—s)7' — psACs), 
或 
24A(5) 一 [1 一 了 >] 一 十 [1 一 (一 力 )s] `. 
展 成 几何 级 数 ， 最 后 我 们 得 到 a, 的 精确 表达 陈 如 下 : 
2a,=1+(q—p)" (4.11) 
此 公式 无 论 从 哪 方面 来 说 ， 都 比 下面 的 显而易见 的 公式 更 可 取 : 
a, =b O0;n, D HE ;n pt. 
(b) 令 q 是 掷 一 个 均匀 的 硬币 二 次 而 不 出 现 长 为 3 的 正面 连贯 的 概率 CER: 
{g,) 并 不 是 概率 分 布 ， 如 果 p, 是 第 1 个 长 为 3 的 正面 连贯 出 现在 第 7 次 试验 的 概率 ， 
则 {zp,}) 是 一 个 概率 分 布 ， 而 g 则 表示 其 “尾部 ”， 即 是 gr 5 Pri Pr Tit.) 


ii l L 
dn— 5 laa FI ee TE ge 9 n=3. (4. 12) 


事实 上 ， 只 有 试验 以 T, HT 或 HHT 开始 时 ， 才 有 可 能 在 nn 次 试验 中 不 出 现 序 列 
HHH， 其 后 的 试验 仍 不 出 现 连 贯 HHH 的 概率 分 别 为 gq,_1,9,-: 和 9q,-3， 所 以 (4. 12) 
右边 的 三 项 正 是 使 “无 连贯 HHH” 出 现 的 三 个 互 不 相 容 的 事件 的 概率 . 

显然 ,wm 一 wo 一 0 一 1， 因 此 ，0 能 够 由 (4.12) 依次 算出 ， 以 了 乘 两 边 并 对 之 3 
Rat, GRR Q(s) 二 >.q,s"， 其 结果 是 : 


Q(s)—1l-—s—s$ =A Qs)-1-s +s (QOZI HERG) 


或 者 


Qs) = (4. 13) 


分 母 有 一 个 根 5 =1. 087 377 8… 和 两 个 复 根 ， 对 于 |s|<s A | 45 十 28 +s? |<c4s, 十 
23 十 3 一 8， 当 | | =s, Hss 时 ， 此 不 等 式 仍然 成 立 ， 故 其 他 两 个 根 的 绝对 值 
超过 Si 从 而 由 (4.9) 有 : 


”1.236 840 
Ia (1, 087 377 Bt” 


其 中 分 子 等 于 (25 十 45; 十 8)/(4 十 4s 十 35)， 其 至 当 nn 较 小 时 ， 此 公式 给 出 的 近似 值 

也 很 好 ， 例 如 ， 对 g, =0.875 与 gq; 二 0.8125， 此 公式 给 出 的 相应 的 近似 值 分 别 为 
0. 8847 与 0. 813 60， 随 着 n 的 增 大 ， 百 分 误差 很 快 地 逐渐 减 小 ， 例 如 ， 由 此 式 算 得 
的 gw 二 0. 416 26… 精 确 到 小 数 点 后 第 五 位 . > 


11.5 ZIARA 


设 两 个 取 整 数值 的 随机 变量 X,Y 的 联合 分 布 如 下 : 
己 {X 一 1 Y=5=k} = Prs 7 有 一 0, 1 <，…， (5.1) 


(4. 14) 
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PR — 7c PRIN | 
Plsss) = Dy Pasi, (5. 2) 


HRR eR, CS BF ea aX fa] BR A L 元 母 函 数 . 无 需 作 本 质 性 修正 ， 最 初 两 节 的 考虑 
仍然 适用 此 处 仅 指 出 可 由 05.2) 直接 得 出 的 下 列 三 条 性 质 就 够 了 : 

(aid RAAT PUX=j\ fe P{Y 一 已 的 母 函 数 分 别 为 A( 人 一 P(s,1) 和 BBC) 一 PCl，,s); 

(b)X 十 Y A BHA P(s,5); 

(C) 随 机 变量 X 和 YY 相互 独立 的 充分 必要 条 件 是 : PC ys) 一 A(CS BBCs ) 对 一 切 
51，52 BR, 立 ， 

Gl 〈a) 二 元 泊 松 分 布 。， 显然 ， 

P (5,552) Se & too, a>0, 6>0, 。 

可 展 成 寡 级 数 ， 其 系数 为 正 且 和 为 1. 故 POs.) 是 某 个 二 元 概率 分 布 的 母 函 
数 ， 其 边缘 分 布 分 别 为 具有 均值 a 十 2 和 a 十 6 的 泊 松 分 布 ， 但 和 X 十 了 具有 母 
Mee te tate, Be RA AIR. (CRRA SH, ME 12 章 
第 2 节 ) | 

(b) 多 项 分 布 ， 考虑 一 个 nn 次 独立 试验 序列 ， 每 次 试验 分 别 以 概率 fo > pio pr 出 现 
结果 E ,El E i X BE; 出 现 的 次 数 ， 则 (Xi XADRA ERAN o t pis tps)” 
的 三 项 分 布 . > 


“11.6 连续 性 定理 


在 第 6 章 曾 证 明 ， 泊 松 分 布 {e "4*/k!1} 是 具有 概率 户 的 二 项 分 布 的 极限 形式 ， 其 

中 p ROBE n 且 满足 limmp=a. B 
b (kinyp) —e™> /k! (24 n 一 co 上 时). 

{6(k;n,p)}) 的 母 函数 为 (g 十 ps)" 二 人 1 一 A(1 一 s)/n)"， 取 对 数 ， 立 即 可 见 此 母 函 数 趋 于 
eX). at FETA PA St Ti YY BE AR. 我 们 将 证 明 此 结果 可 推广 到 一 一 般 场 合 ， 即 ; 概率 
分 布 收 伊 于 一 个 极限 分 布 的 充分 必要 条 件 是 对 应 的 母 函 数 收 全 不 幸 的 是 ， 此 定理 
的 应 用 范围 不 广 ， 因 为 最 有 用 的 离散 分 布 的 极限 是 连续 分 布 〈 例 如 正 态 分 布 古 二 项 
分 布 的 极限 形式 . ) 

连续 性 定理 ”假定 对 每 个 固定 的 n，ao.wsQlnsd2.n，""* 是 一 个 概率 分 布 , 即 是 


arn 0, Pawn=1. (6. 1) 
k=0 
极限 
a, = lim ak (6. 2) 


x 连续 性 定理 仅 用 于 第 12.2 节 中 无 穷 可 分 律 的 一 般 形 式 的 推导 和 第 12. 5 节 的 分 支 过 程 的 总 后 代 . 
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对 每 个 上 之 0 都 存在 的 充分 必要 条 件 是 : 极限 


A(s) = lim > CQ 8 (6. 3) 
对 每 个 sE (0,1) 都 存在 ， 在 此 情况 下 ， 自 动 地 有 
A(s) = ias’. (6. 4) 
k=O 


显然 a, 之 0， A da<l. 注意 : 此 处 的 和 可 以 严格 地 小 于 l. 例如 arn 一 时 
ak 一 0， 对 一 切 & 成立 . 

证 ! SAORA 6.3) 式 右边 之 级 数 . 

O 假定 (6.2) Ror, MA AGS) (6.4) 所 定义 ， 因 为 ja 一 内 | 委 1， 所 以 当 
0<sxtl 时 有 


AOAO |<) lana ES (6. 5) 
k=0 


Br 如 此 之 大 以 使 ;过 e (1 一 ;)， 则 对 一 切 充 分 大 的 nx，(6.5) 的 右边 小 于 2e， 因 此 
左边 可 以 小 于 我 们 所 希望 的 值 ， 所 以 (6. 3) 成 立 . 
GD 假定 (6.3) 成立. 显然 A(s) 是 s HBR, ATU s—0 时 A(s) 的 极限 
ACO) ARTE. AA 
Ao. nA, CS a, ts/1—s)s (6. 6) 
所 以 ， 当 n 一 co 时 ,一 切 a6,, 的 极限 值 都 落 在 A(0) 和 A(ls) 一 5s/ (1 一 s) 之 间 . & 5 一 0， 
RJE aon ACO). 这 就 证 明了 : k=0 HF (6.2) 式 成 立 . 
此 推理 可 以 依次 推 到 一 切 &. 确实 ， 当 0 过 :过 1 时 
A, Cs) — don ACs) ~A(0) 
5 5 
ELRAEWE-TtARATR MAR, A., MEMS (6.7) WUT 6.3). 
如 前 推理 ， 我 们 首先 发 现 ， 导数 A'(0) 存 在 ， 从 而 anA (0)， 用 归纳 法 可 证 (6. 2) 
对 一 切 & 都 成 立 ， > 
例 (a) 负 二 项 分 布 ， 在 第 2 节 例 (d) fH, BIRO fain py 的 母 图 数 是 
p (1 一 gs)“. REA A, HS pol.g?0 HS 一 co 满足 : q~A/r. Ill 
(y = (tar y (6. 8) 


|—gs 1—As/r/ ` 
取 对 数 ， 我 们 发 现 上 式 右边 趋 于 oO, TARA Ce A ee, BN 
r= H rg 一 A 时 有 : 


(6.7) 


k 


fir, p) > T (6.9) 


1. 此 定理 是 拉 普 拉 斯 -斯 蒂 尔 切 斯 变换 的 连续 性 定理 的 特例 ， 此 连续 性 定理 是 在 一 般 框架 下 证 明 的 ， 
在 文献 中 ， 母 函数 的 连续 性 定理 的 叙述 和 证 明 ， 通 常 加 了 一 些 不 必要 的 限制 . 
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(b) 具 有 变动 概率 的 伯 努 利 试验 . 考虑 ?次 独立 试验 ， 第 & 次 出 现成 功 的 概率 为 
pi， 而 出 现 失 败 的 概率 为 g=l-p. BROS, 可 以 写成 n 个 相互 独立 的 随机 变 
BZA: SSX tet, AP XARMA PiX =S; 

P{X,=1}=p,. | 
X, AEE APRA get pass AM S, AEE RABIN 
P(s)=(q, t fis) (qe + p25) °° CQ, + Pas). (6. 10) 

作为 此 模型 的 一 个 应 用 ， 假 设 某 城 市 在 给 定 的 一 天 中 一 个 住户 发 生火 灾 有 具有 小 
概率 po WH p Hpt tp 是 该 城市 发 生火 灾 数 目的 期 望 值 ， 其 中 是 该 城市 的 
住户 数 . 在 第 6 章 中 我 们 曾经 看 到 : 当 pi 一 样 而 且 各 住户 是 否 发 生火 灾 是 相互 独立 
的 ， 则 发 生火 灾 的 数 旭 是 一 个 近似 地 服从 泊 松 分 布 的 随机 变量 ,现在 我 们 证 明 ， 当 
ps 不 一 样 时 ， 此 结论 仍然 成 立 ， 此 结果 将 提升 下 述 论断 的 可 信和 度 : 汝 松 分 布 是 许多 
不 太 可 能 “ “成功”) 的 事件 的 累积 效果 所 形成 的 现象 的 适当 的 刻画 ， 事故 和 电话 时 
唤 都 是 典型 的 例子 . 

现在 ， 我 们 考虑 一 个 熟悉 的 模型 ， 随机 变量 的 个 数 n 在 增加 ，p 按 下 述 方式 依 
赖 n, {pi} 中 最 大 的 都 趋 于 0, 但 pi 十 Pz 十 … 十 p, 二 4 是 一 个 常数 ， 则 由 (6. 10) 有 


log P(s) = S)log{1— pi(1— s)). (6. 11) 
因为 p. 一 0， 应 用 下 列 事 实 ， log(1 一 7z) 二 一 x 一 怒 〈 其 中 9 一 0 当 xz 一 0 时)， 可 得 
log PC == —s)| D a tap) >a), (6. 12) 


所 以 P(s) 趋 于 泊 松 分 布 的 母 函 数 ， 从 而 S, 的 极限 分 布 是 泊 松 分 布 ， 由 此 得 出 结论 : 
4K, WA=p tpt +p, 大 小 适当 ， 则 S, 的 分 布 可 以 用 泊 松 分 布 来 通 近 ， 》 


11.7 J 题 


L 设 X 是 一 个 具有 母 函 数 P(s) 的 随机 变量 ， 试 求 X+1 和 2X 的 随机 变量 . 

2. 求 下 列 分 布 的 母 函 数 ，(a) PLX<n} 3 DP X<; (0) P{ Xn); dOP X nt 1} 3 (e)P{X=en}. 

3. 在 一 个 伯 努 利 试验 序列 中 ,， 令 un BAS SF 第 一 次 出 现在 第 n—1 和 第 n 次 试验 的 概率 . 
SR CAE pe. HB SHH. 

4， 试 讨 论 在 第 2.12 节 中 ， 哪 个 公式 表示 卷 积 ， 何 处 用 到 了 母 吸 数 ? 

5 BPE TRERERK. Ka, 为 使 点 数 之 和 为 n 的 所 有 可 能 的 方式 的 数目 ， 斌 证: iar) 
Ay ty: pe CHC ss? — 8 st 8? —s° ) :一 1. 

6 令 a, 是 “在 一 个 n 十 1 个 边 的 屿 多 边 形 PoP P, P, 用 ”一 2 条 (不 相交 的 ) 对 角 线 划 
分 为 三 角形 ”的 所 有 可 能 的 方式 的 数目 :， 令 qi 二 1， 试 证 对 n 之 2 A: 


1. 亦 可 参见 第 9. 1 节 例 Ce) 和 第 9. 5 BY Cb). 
2. 此 问题 出 自 文献 [73]. 


10. 


11. 


12. 


13. 


14, 


bh 


15°. 


16. 


an =a an Faran- He tania). 
REREH RA, HRK an 的 精确 表达 式 ， 
提示 : 假定 一 条 对 角 线 通过 P, HE k 是 使 PP 出 现在 对 角 线 中 的 最 小 的 下 标 . 
注意 : 习题 7 一 11 参见 第 34. PU, FRAAI, BATH, MAH RR, GR 
(3.6), (3.2) 和 (3. 14)， 没 有 必要 再 计算 . 
Ca) 返回 平衡 发 生 在 第 ”次 或 第 ?次 试验 以 前 的 概率 《分 布 ) 的 母 函 数 为 
(l—s) F Cs). 
(b) GEAR: SA S 0,;=1,2, sn) RRR EE RA : 


its 
] 一 


(c) 证 明 这 等 价 于 〈3. 16) 导出 的 命题 . 
没有 “返回 平衡 ”发 生 在 和 第) 次 (不 含 此 次 ) 试 验 以 后 的 概率 的 母国 数 为 (1 一 5)” 
Us) | p—gl. 

(a) WE r>0. PS =r} HERR E oU). 

(b) 4 p= Sat, SHE: MADRES ESS 的 概率 的 母 函数 也 是 〈a) 中 所 给 出 
BA) BE ek BX. 

(a) 固定 + 之 0 AM RDO. RE: BE “SS, =r” RDE k RAE RE. 

(b) 把 习题 10 (a) 中 的 “恰巧 发 生 & 次 ” 改 为 “至 多 发 生 & 有 次 “， 求 同样 的 问题 . 

Ca) 求 下 列 事 件 的 概率 的 母 限 数 . 

Mit r>0 之 后 第 1 次 返回 平衡 发 生 在 第 7 次 试验 . 

(b) 把 (a) 中 的 事件 的 “第 1 次 ”三 字 去 掉 ， 做 同样 的 问题 . 

固定 > 在 第 9.3 节 例 Cd) 的 等 待 时 的 问题 中 ， 求 出 S 的 母 函数 ; 验证 第 9 章 公 式 
(3.3) 中 的 期 望 ， 并 求 出 其 方差 . 

( 续 上 题 ). PER BE FRO ERS UE HARB HEZ sh 
al 


= (F9). 


Pr = North, GD), (7.1) 


HRM (7.1) HES SE RR. | 

对 > 个 事先 标号 的 元 素 《〈 而 不 是 任意 ~ 个 ) ， 解 决 前 面 两 个 问题 . 

在 伯 努 利 试验 序列 中 ， 试 验 到 第 1 次 失败 出 现 为 止 ， 叫 做 一 个 “轮回 ”， 试 求 ”个 轮回 中 
累积 的 成 功 次 数 S 的 概率 分 布 及 其 母 困 数 . 

GLM). (2) A R EIZ vo 次 成 功 时 接连 的 轮回 数 〈 即 第 ”次 成 功 发 生 在 第 下 TH 
回 )， 求 出 ECR),Var(R)， 并 证 明 : 


1. 原著 没有 “ “分布 ) 的 母 函 数 ”6 字 ， 不 妥 ， 一 一 译 者 注 

2. 习题 15 一 16 与 台球 游戏 有 直接 关系 ， 成 功 概率 p 衡量 游戏 者 的 技术 ， 游 戏 者 一 直 玩 到 他 失败 为 目 . 
因此 ， 他 累积 的 成 功 次 数 是 他 这 一 轮回 的 长 度 、 游 戏 持续 到 一 个 游戏 者 获得 N 次 成 功 为 止 、 因 此 ， 
习题 15 给 出 一 个 游戏 者 获得 7 次 成 功 所 需要 的 轮回 数 的 概率 分 布 ， 而 习题 16 是 关于 两 个 游戏 者 不 
分 胜 负 的 概率 和 平均 持续 时 间 .， 关 于 进一步 的 详情 请 参见 文献 [74]. 
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17. 


18. 


19. 


20. 


21. 


22. 


23. 


24. 


P{R=r) = pq’? (mre? ) 


v— 1 
(b>) 考虑 两 个 分 别 有 具有 po a Mp. g 的 但 努 利 试验 序列 . OR: 相同 的 轮回 数 之 后 是 
第 N 次 成 功 的 概率 . 


设 X 以 相同 的 概率 工分 别 取 值 0,1,…,r 一 1， 当 是 一 个 复合 数 ， 例 如 说 + 一 ab，X 可 表 


为 两 个 独立 的 取 整 数值 的 随机 变量 之 和 . 
设 S =X +--+, 是 个 相互 独立 的 随机 变量 之 和 各， 其 中 每 个 随机 变量 以 相同 的 概率 


二 取 值 1,2,…,a， 证 明 其 母 函 数 为 ; 


s1—s*) r 
P(s)= (Sa 
4 7 之 n 时 ， 


Pls =f) = DD) TT) 


J —n—av 
_ —av— 1 
=a yew (" ) (7 a=] ). 
(上 述 级 数 只 有 有 限 项 非 零 . ) 
注意 ， 当 a= 一 6 时， 我 们 得 到 掷 几 颗 避 子 出 现 点 数 之 和 为 了 十 2 的 概率 ， 此 问题 之 解 ， 曾 


由 棣 莫 弗 所 给 出 . 
( 续 上 题 )， 概 率 PISS RE RB PO) /A—s), Am 


PIS, <j} =a Dev (? C72) 
(3 EAA). BREA. aco, jo 满足 j/a 一 z， 则 
PIS, <i} 5 (7) ao", 


其 中 求 和 号 中 的 "满足 S<. 

注意 ; 此 结果 是 由 拉 格 朗 日 得 到 的 .在 几何 概率 论 中 ， 右 边 表示 有 具有 区 间 (0,1) 上 的 均 
名 分 布 的 几 个 相互 独立 的 随机 变量 之 和 的 分 布 . 

ik 忆 En 次 伯 努 利 试验 中 成 功 次 数 能 被 3 整除 的 概率 ， 试 求 un 的 递 推 公式 ， 并 由 此 求 出 
HA R. 

CELA) BAA. Su, Mw, 分 别 为 S$; 具有 形式 3v 十 1 与 3v 十 2 的 概率 Kat 
志 十 邮 一 1)， 试 求 三 个 联 立 递 推 关系 ， 并 由 此 求 出 母 亢 数 所 满足 的 三 个 方程 . 

设 义 和 YY 是 分 别 具 有 母 函 数 UCs) 和 VCs) 的 相互 独立 的 随机 变量 . 试 证 ， PLX 一 Y 三 外 是 


UOVO PH S 的 系数 ， 其 中 7 一 0, 士 1, 士 2 
姑母 函数 ， 今 和 是 具有 母 函 数 P(s) 的 随机 变量 ， 且 令 忆 zs" MET. ol 收敛 ， 则 所 有 
的 矩 m 二 EC(X’) 存 在 ， 且 序列 m,/r! 的 母 函数 FOE s| <log s 收敛 ， 此 外 ， 
F(s) = y eg = P(e‘), 
r | 


r=0 


注意 : 通常 称 F(s) 为 矩 母 函 数 ， 虽 然 实际 上 它 所 产生 的 系数 是 m /r!. 


25. 


26. 
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假定 AG) = Das" RABREEY ， 而 且 % 是 V(s) 的 按 绝对 值 来 说 最 小 的 一 个 根 ， 如 果 
51 是 ~ 重 根 ， 证 明 


此 处 p=( 一 J! UGs,)/V (ai). 
二 元 负 二 项 分 布 . 斌 证明: 当 参 数值 为 正 时 ， peti pis: — pose} HAX, Y) AE RR, 
其 中 X,Y 的 边缘 分 布 和 六 十 Y 的 分 布 都 是 负 二 项 分 布 `. 


1. MË (G.E. Bates) MAB J. Neyman 在 研究 意外 偏 儿 中 ， 曾 使 用 过 这 类 分 布 . 参见 加 州 大 学 统 
th he. vol, l, 1952). 


“12 RA aA CWE 


概率 论 重 要 的 一 部 分 是 关于 独立 随机 变量 之 和 ， 而 且 在 许多 情况 下 ， 此 和 中 的 
项 数 本 身 就 是 一 个 随机 变量 ， 此 处 ， 我 们 只 考虑 取 整 数值 的 随机 变量 这 一 特殊 情形 ， 
这 部 分 是 为 了 说 明 母 图 数 的 用 处 ， 部 分 是 为 研究 无 穷 可 分 律 和 第 二 卷 书 中 的 具有 独 
立 增 量 的 随机 过 程 作 准 备 . 

作为 一 个 特别 诱 人 的 应 用 ， 我 们 来 描述 分 支 过 程 的 漂亮 的 理论 的 要 素 . 


12.1 随机 个 随机 变量 之 和 


设 {X,) 是 一 个 相互 独立 的 具有 同 分 布 的 随机 变量 序列 ,其 公共 分 布 为 : 
P{X,=js=f,, RBH f(s) = 》) fs. RIZAI FEA: 

Sv 二 XX 十 六 ,十 … 十 让， 
感 兴趣 ， 其 中 项 数 N 是 一 个 与 XARA S NN 的 分 布 为 PIN=n)=g 
其 母 函数 为 g(s) 二 2g,s"，S, 的 分 布 {入 }， 可 以 用 条 件 概 率 的 基本 公式 得 到 ， 


h; = P{S, “Sp wp "+X, =j} (1.1) 


如 果 ，N 只 取 有 限 多 个 值 ， 则 Sy ce TEA BRAT X, 的 样本 空间 上 ， 和 否则 ， 作 
为 和 的 Sy 的 概率 定义 就 涉及 无 穷 序 列 {X,} 的 样本 空间 ， 但 是 ， 我们 仅 涉 及 Sw 的 分 
布 ， 为 此 目的 ， 我 们 就 取 分 布 (1.1) 作为 Sv 在 具有 点 0,1,2,… 的 样本 空间 上 的 
定义 . 

对 于 固定 的 n, Xi +X, bee TX, 的 分 布 为 {f;) 与 其 本 映 的 2 - 重 卷 积 ， 因此 
(1.1) 可 以 写成 下 列 更 紧凑 的 形式 : 


一 Dy BA Fi)" (1. 2) 


KARAR eRe fa. CG eR fr Os), Ak, H d.2), Sy KE A 
数 显 然 为 : 


h(s) = Shs! = — > = g,f"s). (1.3) 


上 式 右 边 是 oe NRRL FOR s 所 得 到 的 函数 ， 而 是 g(F(s))， 这 就 证 明了 了 : 
定理 和 Sw 二 XX 十 … 十 Xw 的 母子 数 是 复合 函数 gs)). 
其 证 明 还 可 用 条 件 期 望 的 方法 复述 如 下 : 由 定义 
E(ssn | N=n)= f" Cs), (1. 4) 
为 了 得 到 有 h(s) 二 ECssN )， 把 上 式 两 边 乘 以 P{N 一 n) 再 对 一 切 n 之 0 RABI. LOLS 9 章 
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(2. 9). | 

下 面 介 绍 两 个 有 趣 的 特例 . 

OME X, MEAS ARLE. H OP{X,=1} =p. P(X,;=0s=q, W f= 
9 十 ps， 因 此 h(s)=g(q tps). 

(DUR N 具有 均值 为 大 的 泊 松 分 布 ， 则 hCs)= 二 =e 3, 以 此 为 母 图 数 的 分 布 称 
为 复合 泊 松 分 布 . 特别 地 ,如 果 X; 是 伯 努 利 随 机 变量 , 且 N BAMA H.W hd = 
e PT ,和 SN 有 具有 均值 为 tp HARADA. 

例 (Ca) 在 第 6.7 HH (c) 中 ， 我 们 曾经 见 到 : X 射线 引起 细胞 中 染色 体 的 分 
烈 ， 在 一 定 的 剂量 和 上 曝光 时 间 下 ， 分裂 的 细胞 数 N 具有 泊 松 分 布 ， 一 个 分 裂 的 染色 
体 恢复 原状 的 概率 为 5， 而 细胞 死亡 的 概率 为 p=1—¢. Web Sy 是 观察 到 的 分 裂 个 
数 - 一 它 具 有 均值 为 tp 的 泊 松 分 布 . 

(b) 在 陷阱 实验 中 59 ，g, 表示 某 种 野兽 有 ?2 只 的 概率 ， 再 设 每 只 野兽 沙 入 陷阱 的 
概率 为 p (假定 各 种 野兽 是 随机 独立 的 )， 则 这 类 野兽 中 被 捕获 的 个 数 Ss 是 一 个 随机 
恋 量 ， 它 的 母 函数 为 g(g 十 ps)、 上 面 的 描述 可 用 多 种 方式 加 以 改变 .例如 ， 令 g; 为 
一 只 昆虫 产 n 个 卵 的 概率 ， 而 p 为 一 只 卵 成 活 的 概率 ， 则 Sw 是 成 活 的 卵 的 个 数 . 又 
i, & g, 为 一 个 家 庭 有 1 个 小 孩 的 概率 ， 再 设 小 孩 的 男女 性 别 比 为 p: 9， 则 Sw 是 
一 个 家 庭 男 孩 的 个 数 . 

(每 棵 树 都 结 大 量 的 种 子 ， 但 每 粒 种 子 成 活 的 概率 很 小 ， 故 有 理由 假设 每 棵 树 
成 活 的 种 子 的 粒 数 服从 泊 松 分 布 ， 如 果 {(g,) 表 示 种 树 的 棵 数 的 分 布 ， 则 g(e““) 是 
成 活 的 种 子 的 个 数 的 母 基数 、 

(d) 要 求 服务 的 时 间 . 考虑 一 个 电话 的 中 继 线 ， 一 个 柜台 ,或 任何 一 个 服务 倪 
施 ， 接 连 到 来 的 顾客 要 求 的 服务 时 间 为 XX ,…,{X} 可 视 为 相互 独立 的 具有 同 分 
布 的 随机 变量 ， 在 一 天 中 来 到 的 顾客 (或 电话 呼叫 ) 数 是 一 个 随机 变量 N， 因 而 他 
们 要 求 服 务 的 总 时 间 是 随机 和 X, 十 Xs 十 … 十 XN， > 


12.2 复合 泊 松 分 布 


在 随机 和 SN 二 Xi 十 … 十 入、 中 ， 最 重要 的 是 : 其 中 的 N 具有 泪 松 分 布 . 由 于 今 
后 会 凸显 出 的 理由 , 令 N 的 期 望 为 44， 如 果 X; 具有 同 分 布 {f;);， 则 Sy 具有 复合 光 


{hj}, =e” > CAL)" fp ye (2. 1) 


n ! 
其 母 函 数 为 
h,(s)=e VO | (2.2) 
例 (a RRMA. 假设 在 长 为 1 的 时 段 内 被 闪电 击 中 的 次 数 是 一 个 均值 为 Xt 的 
泊 松 随机 变量 ， 如 果 {f;) 是 一 次 电击 所 造成 的 损失 的 概率 分 布 ， 则 (假定 随机 独立 
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性 ) 在 长 为 1 的 时 段 内 的 总 损失 服从 形 如 (2. 1) 的 复合 泊 松 分 布 . 

(b) 宇 害 射 线 和 十， 一般 假 定 在 长 为 1 的 时 段 内 宇宙 射线 雨 的 数目 N 服从 期 望 为 i 
的 泊 松 分 布 ， 对 于 任何 一 个 计数 器 来 说 ， 每 一 次 宇宙 射线 十 被 记录 的 数目 是 一 个 具 
有 分 布 {f;} 的 随机 变量 ， 在 时 段 上 内 被 记录 的 总 数 Sw 也 具有 形 如 (2. 1) 的 复合 泊 松 
分 布 . 

(c) 在 生态 学 中 ， 假 定 一 个 小 区 域内 动物 鹤 的 个 数 服 从 泊 松 分 布 ， 其 均值 与 该 区 
域 之 面积 成 比例 .如果 一 宣 中 动物 的 个 数 的 概率 分 布 为 {f:}， 并 假定 各 帘 中 的 动物 数 
是 相互 独立 的 ， 在 这 些 假定 下 ,该 区 域内 动物 的 总 数 也 具有 形 如 (2.1) 的 复合 泊 松 
分 布 ， 此 方法 在 实际 中 广 为 应 用 . > 

注意 ， 上 述 三 例 均 与 第 6.6 节 所 讨论 的 泊 松 分 布 有 密切 的 关联 ， 在 前 两 个 例子 
中 ， 随 机 变量 Sw 与 每 一 个 时 间 区 间 都 有 关系 .上 [如 果 我 们 把 面积 转化 为 时 间 ， 例 
(c) 也 是 一 样 的 . ] 显然 ， 在 上 述 模 型 中 ， 如 果 把 时 间 区 间 分 割 成 两 个 不 变 的 子 区 间 ， 
它们 的 贡献 是 相互 独立 的 并 把 它们 一 起 加 到 Sy 中 去 ， 若 用 母 函 数 (2.2) 的 概念 ， 
RA : 

ha. (8) =h, (sh, (s). (2.3) 

tS AEE PRP (2.2) 都 满足 (2. 3)， 现 在 证 明道 命题 也 成 立 ， 一 族 满 足 
(2.3) HOMES ERR h 必定 是 形 如 “(2.2) 的 函数 . [此 处 必须 这 样 理解 :结论 只 对 
整数 值 随机 变量 才 成 立 ， 复 合 泊 松 分 布 的 概念 ， 当 X, 服从 任何 分 布 时 ， 都 是 有 意义 
的 ， 在 具有 独立 增 量 的 随机 过 程 的 一 般 理 论 中 ， 类 似 于 (2. 3) 的 方程 ,扮演 痢 重要 
角色 ， 然 而 ， 此 类 随机 过 程 ， 不 必 受 复合 泊 松 分 布 的 限制 . ] 

下 面 的 定义 和 定理 ， 实 质 上 参考 着 在 0,1,… 上 的 概率 分 布 ， 但 是 为 了 简单 起 见 ， 
它们 用 相应 的 母 函 数 来 陈述 . 

定义 ” 称 概率 母 函数 有 是 无 穷 可 分 的 ， 如 果 对 每 个 正 整 数 n， 届 仍然 是 一 个 概率 
EE oh Hk. 

从 下 面 的 定理 可 以 看 出 ， 如 果 nO 不 是 整数 ， 结 论 仍 然 成 立 ， 如 果 一 族 概率 母 
函数 满足 (2.3) WA Hh, PRU A, 是 无 穷 可 分 的 ， 此 结论 的 逆 命 题 包 含 在 下 面 的 
定理 中 . 

定理 ! 无 穷 可 分 的 概率 母 函 数 可 表 为 形 如 (2.2) 的 函数 ， 其 中 { 广 ) 是 0,1,… 上 
的 概率 分 布 . 

证 SACS) = DAs. HREM BT BA 人 1, 人 都 是 一 个 概率 母 晒 数 ， 所 以 


h, >0， 和 否则 痪 的 究 级 数 中 的 绝对 项 为 0， 这 时 ho =h SHA, 0. 由 此 推出 : 对 
任何 OLS <l, Vh(s) 一 1]， 从 而 
log /h(s)/hy =logLl+ (Vhs) /ho —1]~ Sh (s)/ho 一 1， (2.4) 


1. 这 是 重要 的 利 维 定理 的 一 个 特例 . 
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此 处 符号 一 表示 两 边 之 比 趋 于 1. 把 此 关系 式 与 ;二 1 的 特殊 情形 结合 起 来 ， 得 到 
[因为 h(1) 二 1]: 

log h(s)—log ho_ log /h(s)/ho _ Vhs) = Sho 

~logho = log Thy 1-Vho 

右边 是 一 个 具有 正 系 数 的 天 级 数 ， 而 且 当 ;二 1 时 ， 这 些 系数 之 和 为 |， 因 此 ， 对 每 

个 n， 右 边 是 一 个 概率 母 函数 .由 第 6.6 节 的 连续 性 定理 ， 这 和 草 涵 了 左边 是 一 个 非 负 

FIARA S ;二 1， 我 们 发 现 >f, 二 1， 这 意味 着 hh 可 以 表 成 形 如 (2.2) 的 


(2.5) 


PAN, Et At=—log ho. > 
此 定理 可 复述 如 下 形式 : 
准则 “也 数 瑚 是 无 穷 可 分 的 概率 母 函 数 的 充分 必要 条 件 是 : h(1) 二 1 而且 
log ma 一 Sas! tha, 20, Na =A < o. (2. 6) 


确实 ， 在 (2.6) PS f,=a./A, WAAR (2.2) WER OR :=1), mM 
且 这 是 如 〈2. 1) 所 定义 的 复合 泊 松 分 布 的 母 函 数 . 
例 (由 比较 (2.2) 和 前 一 节 的 定理 ， 我 们 发 现 ， WE N 的 分 布 是 无 穷 可 分 的 ， 
则 随机 和 Sw 的 分 布 也 是 无 穷 可 分 的 . 
(e) 负 二 项 分 布 的 母 消 数 : 
h(s=(;4-), p+q=l, (2.7) 
具有 性 质 (2. 3) 因此 它 是 无 穷 可 分 的 ， 取 对 数 ， 立 即 发 现 ， 它 是 形 如 (2.2) Wee 
数 ， 对 应 的 | 
f,=q'/an, A=logp . (2. 8) 
{f,) 是 熟知 的 对 数 分 布 ， 它 被 统计 学 家 广泛 地 应 用 . 
(人 由 第 2 章 (8.9) 和 (8. 10) an 当 g=1—-p>pit, KA 


= J/g— qT ps ~ VQ Pp 
f(o= 0 一 qs g(s) gps’ (2. 9) 
满足 条 件 (2.6), Mit See 都 是 无 穷 可 分 的 概率 母 函数 . 有趣 的 征 : 
FCs) =gls) la + ps). (2.10) 


此 处 ， 我 们 把 一 个 无 穷 可 分 的 概率 母 函 数 分 成 了 两 个 概率 母 函 数 的 乘积 ， 而 其 中 只 
有 一 个 是 无 穷 可 分 的 概率 母 函 数 ， 这 种 分 解 的 可 能 性 开始 使 人 很 惊奇 ， 而 后 这 一 读 
题 引 起 了 广泛 的 注意 . > 
复合 泊 松 分 布 的 一 个 值得 注意 的 性 质 ， 曾 经 是 人 们 仔细 思索 的 一 个 课题 .为 简 
tel, 4 入 二 Af;， 则 形 如 (2.2) ARERR h, 分 解 为 下 述 形式 : 
六 (3S) 一 ef 。 BAK TD e GbE TD vee (2.11) 
乘积 可 以 是 无 穷 多 项 ， 但 这 不 会 给 我 们 的 讨论 带 来 麻烦 ， 从 而 我 们 可 以 假定 只 有 有 
限 多 个 和 是 正 的 ， 第 一 个 因子 是 通常 的 具有 均值 i 的 泊 松 分 布 的 母 函 数 ， 第 二 个 因 
子 是 2 乘 一 个 泊 松 随机 变量 的 母 函数 ， 即 是 ，e** (X22)"/n! 不 是 nn 所 对 应 的 概率 ， 
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而 是 2n 所 对 应 的 概率 ， 类 似 地 ， 第 个 因子 是 & RTA ENE ae. A 
此 ，(2.11) 给 出 了 Sw 一 个 新 的 表示 ，Sw 是 相互 独立 的 随机 变量 Y Yose A, H 
中 Y, 仅 取 值 0,&,2k,…, 但 对 应 的 概率 仍 构 成 泊 松 分 布 ，(2.11) 的 内 迹 可 描述 如 下 : 
& N, 是 和 :从 N 中 等 于 1; 的 随机 变量 的 个 数 ， 则 N= N -N:+ tta mH (2.11) 
说 ，{Ni) 是 相互 独立 的 ， 且 它 们 都 涉及 泊 松 分 布 . 

例 (g) 汽 车 事故 ， 把 X 解释 为 卷 人 第 & 次 事故 汽车 的 辆 数 ， 标 准 的 假 议 是 : 
{(X,} 是 相互 独立 的 ， 而 且 事 故 发 生 的 次 数 N 服从 泊 松 分 布 ， 卷 人 事故 中 去 的 汽车 的 
总 辆 数 为 Xi 十 … 十 Xv， 它 只 有 复合 泊 松 分 布 (2.1. ON, BRA 辆 汽车 卷 进去 
的 事故 的 次 数 . 根据 (2. 11)，{NN;} 是 相互 独立 的 ， 而 且 它 们 都 具有 泊 松 分 布 ， 此 结 
果 的 实际 意义 无 需 解释 . > 

[对 复合 泊 松 分 布 的 一 个 推广 ， 请 见 第 17.9 节 例 《a). | 
2a， 具 有 独立 增 量 的 过 程 . 

前 面 的 结果 ， 通 过 它们 与 一 _ 类 重要 的 随机 过 程 的 密切 联系 ， 引起 了 人 们 的 兴趣 . 尽管 这 
部 分 理论 已 超出 本 书 的 范围 ， 但 我 们 还 是 作 一 点 非 正式 的 介绍 ， 

从 一 个 简单 的 例子 开始 ， 考 虑 来 到 一 个 电话 局 的 呼叫 次 数 ， 它 是 时 间 的 函数 .作为 一 个 
电话 局 的 业务 ， 要 求 对 每 个 二 记录 在 时 段 0 到 :进入 电话 局 的 呼叫 次 数 Z(t)， 假 定 依 次 来 到 
的 呼叫 在 时 刻 ,tz …， 则 当 O<e <n AT. Za) =0, A, H uK ZO Sk 及 
之 ， 每 一 个 只 取 值 0,1,2… 的 非 降 函数 代表 了 来 到 该 电话 局 的 呼叫 次 数 的 一 种 发 展 过 程 ， 内 
此 ， 这 类 问题 的 概率 模型 必须 建立 在 其 样本 点 为 函数 Z(t) 的 样本 空间 上 〈 在 离散 的 试验 序列 
中 ， 样 本 点 是 一 个 序列 )， 用 某 种 方式 赋予 的 概率 ， 必 须 使 我 们 能 够 处 理 诸如 下 面 这 些 复 洒 的 
事件 Z(t 十 了) 一 Z(0) 超 过 17， 或 者 Z(2) 在 某 个 时 刻 超过 ato (后 面 这 一 事件 ， 是 综合 风险 
理论 中 的 破产 问题 的 主要 对 象 )、 下 面 我 们 将 认为 这 种 赋 概 当然 是 可 能 的 .我 们 的 主要 目的 是 
证 明 ， 关 于 这 类 过 程 的 一 组 简单 而 自然 的 假设 会 保证 : 对 于 每 个 固定 的 :， 随 机 变量 ZOOM 
具有 复合 泊 松 分 布 . 

类 似 的 考虑 可 用 到 一 大 类 经 验 的 现象 中 去 ， 确 实 如 此 ， 电 话 呼叫 次 数 的 随机 变量 Z), 
可 以 代表 接连 的 会 话 的 累积 长 度 (花费 ); 或 卷 人 事故 的 汽车 总 数 ;， 或 电击 造成 的 累积 损失 
或 电力 的 总 消耗 量 ;， 或 累积 的 降雨 量 …… 等 等 ， 在 这 一 章 的 框架 内 ， 我 们 必须 假定 Z(t) 只 取 
非 负 整数 值 ， 但 其 理论 可 以 抽象 到 任意 的 随机 变量 . 我 们 把 注意 力 集中 到 满足 下 述 两 个 基本 
假设 的 随机 过 程 上 来 ， 这 些 假设 在 许多 应 用 中 似乎 是 目 然 的 . 

(a) 过 程 是 时 齐 的 ， 即 是 ， 增 量 Z(t 十 有) 一 Z02) 的 分 布 只 依赖 时 间 区 间 的 长 度 而 不 依赖 其 
位 置 〈 即 时 间 起 点 D’. 

(b) 在 相 邻 的 两 个 时 间 区 间 上 的 增 量 Ze ) 一 ZG6) 与 Z(11) 一 Z(to) 是 相互 独立 的 ， 上 一 市 
的 结果 现在 可 以 复述 如 下 ， 如 果 存 在 一 个 满足 假设 (a2) 和 〈b) 的 过 程 ， 则 增 量 Z(t 二 有) 一 


1. 此 条 件 并 不 如 初 见 时 那么 苛刻 ， 例 如 ， 在 白天 “ 忙 时 ”， 来 到 电话 局 的 呼叫 次 数 远 比 在 午夜 1 点 钟 
来 到 的 呼叫 次 数 多 ， 所 以 过 程 不 是 时 齐 的 ， 然 而 ， 显 而 易 见 ， 电 话 工程 师 主要 关心 的 是 日 天 中 的 
“入 时 ” 在 这 一 个 时 段 ， 过 程 可 以 考虑 为 时 齐 的 ， 经 验 也 证 明 : 在 “ 忙 时 ”内 ， 来 到 电话 局 的 电话 
呼叫 次 数 惊 人 地 近似 服从 泊 松 分 布 . 
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Z(t) 具 有 复合 泪 松 分 布 ， 特 别 地 ， 当 Z(2) 仅 仪 改变 单位 ， 此 随机 变量 具有 相 辣 的 泊 松 分 布 
[参见 (2. 11)]. 

因此 ， 我 们 找到 了 简单 和 复合 泊 松 分 布 的 本 质 特 性 ， 与 第 6 章 的 推导 对 比 ， 泊 松 分 布 不 
YEA MEIN HRMS, EASA Aree 〈 人 们 可 能 说 ， 作 为 一 个 自然 规律 
的 表示 )。 当然 ,我 们 现在 面 对 着 一 个 反问 题 : 是 否 每 一 族 复合 泊 松 分 布 确实 对 应 着 一 个 随机 
过 程 ? 回答 是 肯定 的 ， 但是， 事实 “〈 令 人 惊奇 的 ) 是 上 述 两 个 假设 不 能 充分 地 描述 惟一 的 过 
程 ， 为 了 对 一 类 有 趣 的 过 程 能 惟一 描述 ， 需 要 把 假设 (D 加 强 为 : 对 每 个 nx， 对 应 于 有 限 分 
WE Kh KLK, 的 nn 个 增 量 是 相互 独立 的 .这 是 过 程 具有 独立 增 量 的 定义 ， 任 何 一 族 复合 泊 
松 分 布 决定 惟一 一 个 具有 独立 增 量 的 随机 过 程 ， 因此， 理论 上 不 会 产生 困难 了 . 但 是 ， 我 们 
曾经 假定 独立 性 仅 限于 两 个 区 间 . 这 种 有 限制 的 假定 ， 能 充分 地 决定 增 量 的 分 布 的 形式 ， 但 
是 可 以 构造 出 很 病态 的 过 程 也 具有 此 性 质 :. 此 例 说 明 构造 随机 过 程 的 完整 模型 的 固有 的 
困难 . 
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我 们 将 描绘 一 类 能 作为 许多 经 验 过 程 的 简单 模型 的 随机 过 程 ， 并 说 明 母 函数 的 
用 人 处， 用 语言 来 说 ， 这 类 过 程 可 描述 如 下 : | 

考虑 一 些 质点 ， 它 们 可 以 产生 同一 类 型 的 新 的 质点 .起 始 或 第 0 代 有 一 个 质 
点 ， 每 一 个 质点 以 概率 p PERS AHMAR (k= 二 0,1,2,…)， 第 n 代 的 直接 后 代 构 成 
Bntlr. 每 一 代 的 各 质点 之 间 的 行为 是 相互 独立 的 .我 们 感 兴趣 的 是 各 代 质 点 
的 数目 . 

在 使 用 严格 的 随机 变量 的 术语 之 前 ， 先 作 一 点 简单 的 说 明 . 

(a) 核 链 锁 反应 .这 个 与 原子 弹 有 关 的 应 用 是 众所周知 的 质点 是 中 于 ， 它 总 有 
机 会 被 其 他 中 子 撞 到 . 设 p 是 一 个 质点 迟早 会 与 其 他 质点 发 生 碰 撞 而 产生 mm 个 质点 
的 概率 ，g 二 1 一 p 是 一 个 质点 无 后 代 的 概率 ， 即 此 质点 始终 不 活动 (换言之 ， 即 消亡 
或 被 吸收 ) 的 概率 ， 在 此 模型 中 ， 后 代 只 能 为 m 或 0， 其 相应 的 概率 分 别 为 p 和 g. 
( 即 p,=9,~,=p, Mwt—W j 关 0 或 m,p; 二 0.) 最 坏 的 情况 是 : 初始 质点 始终 不 活 
动 ， 从 而 过 程 没 有 启动 ， 最 好 的 情况 是 ; B-RA m AER, RARA m TRR, 
等 等 ， 如 果 p 接近 于 1]， 则 质点 数 异 常 迅 速 地 增加 .， 从 数学 上 看 ， 这 个 数目 可 以 无 限 
增 大 ; 而 从 物理 上 看 ， 质 点 数目 很 大 时 ， 裂 变 的 概率 不 可 能 保持 为 常数 ， 统 计 独 立 
性 也 不 复 成 立 ， 不过， 对 通常 的 链 锁 反 应 来 说 ， 可 将 “质点 数 无 限 增 大 ”的 数学 拍 

(b) 姓 氏 的 存亡 ， 此 处 《如 现实 生活 中 一 样 ) 仪 考虑 男性 后 代 ， 他 们 扮演 看 (a) 


L 在 这 个 过 程 中 ， 增 量 Z(t3) 一 Z012) 与 Z (12) 一 Z (ny) 相互 独立 ， 也 与 Z(41) 一 Z(to) 相 互 独立 ， 而 
上 且 它 由 后 面 这 两 个 增 量 完全 确定 .参见 [77]. | 
2. 参见 上 178]， 那 去 掉 了 空 齐 性 假设 . 
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中 质点 的 角色 ，p 为 一 个 新 生男 孩 有 个 儿子 的 概率 ， 我 们 的 概 型 中 ， 作 了 两 个 人 
为 的 简化 : 第 一 ， 受 所 俗 的 影响 ， 生 育 多 少 后 代 会 有 观念 上 的 变化 ， 因 而 分 布 {p} 
实际 上 是 逐 代 改变 的 ; 第 二 ， 共 同 的 遗传 和 相似 的 环境 ， 必 定 引 起 亲 兄 弟 之 间 的 茶 
种 相似 性 ， 这 与 随机 独立 也 是 矛 秆 的 . RATE DOR ed de WA BR A eR 
但 又 不 影响 其 本 质 特征 ， 我 们 将 推出 某 家 族 第 代 有 & 个 子孙 的 概率 ， 特 别家 族 灭绝 
的 概率 ， 姓 氏 存亡 问题 似乎 是 用 概率 方法 研究 链 锁 反应 的 第 一 例 . 首先 讨论 这 个 问 
题 的 是 高 尔 顿 〈1889) ， 有 关 此 问题 的 详情 可 参看 文献 179， 洛 特 卡 〈Lotka) 在 此 书 
中 证 明了 : 美国 的 历史 资料 很 符合 下 述 分 布 ， 甸 一 0.4825, 订 二 (0.2126) + (0.5893) 
(& 宇 1)， 此 分 布 除 去 第 一 项 后 就 是 几何 分 布 . 

(c) 基 因 与 突变 有机体 中 的 每 个 基因 (参见 第 5. 5 节 ) 都 有 可 能 在 1,2,3,… 个 
直接 后 代 中 再 现 . 当然 ， 我 们 的 模型 在 描述 此 过 程 时 ， 和 忽略 了 总 体 随 时 间 的 变化 . 
此 模型 在 研究 突变 或 基因 内 部 的 变化 中 很 有 用 .一 个 自发 的 突变 产生 一 个 新 型 基因 ， 
这 个 基因 起 着 “第 0 代 质 点 ”的 作用 .这 种 理论 ， 可 以 用 来 估计 突变 基因 的 生存 与 
传播 的 机 会 .为 确定 起 见 ， 考 虑 按 R. A 费 希 尔 ) 一 株 玉米 ， 它 是 某 100 颗 种 子 的 父 
体 又 是 另 100 颗 种 子 的 母体 ， 如 果 总 体 的 大 小 保持 不 变 ， 则 这 200 颗 种 子 中 平均 有 2 


颗 长 成 玉米 、 每 颗 种 子 得 到 一 个 特定 的 基因 是 亏 ， 所 以 ， 一 个 突变 基因 ， 恰 巧 在 


棵 新 玉米 中 表现 出 来 的 概率 等 于 成 功 概率 为 p=1/200 的 200 KAR Ali ee Pte 
出 现 上 次 成 功 的 概率 ， 于 是 ， 有 理由 假定 {pi} 近 似 地 为 均值 为 1 的 泊 松 分 布 ， 如 坟 基 
因 带 有 某 种 生物 学 上 的 优势 ， 我 们 会 得 到 均值 大 于 1 的 泊 松 分 布 . 

Cd) 等 待 队列 [分 支 过 程 的 有 趣 的 应 用 出 现在 排队 论 中 ， 粗 略 地 说 ， 在 服务 
设施 空 着 时 来 到 的 因而 可 以 立即 得 到 服务 的 顾客 称 为 祖宗 ， 在 他 接受 服务 期 间 来 到 
的 顾客 称 为 他 的 直接 后 代 ， 这 些 顾 客 加 入 等 待 队列 ， 此 过 程 持 续 到 队伍 消失 为 止 . 
我 们 将 在 第 5 PA O 中 详细 讨论 ， 并 在 第 5 节 例 〈c) 中 讨论 更 有 趣 的 变化 了 的 
问题 . > 


12.4 分 支 过 程 的 灭绝 概率 


今 Z 是 第 n 代 的 个 数 ， 而 P, 是 其 概率 分 布 的 母 函 数 ， 由 假设 ，Z, 一 1 H 
P, (s) = PCs) = ST pst. (4.1) 


第 n 代 可 以 据 第 1 RRR Z, 族 ， 这 意味 着 : Z, 是 2Z; 个 随机 变量 Z。 之 
和 ， 其 中 每 一 个 随机 变量 都 代表 第 1 代 中 的 一 个 成 员 的 后 代 个 数 ， 由 假设 ， 每 个 2 
的 分 布 都 与 Z。, 的 分 布 相同 〈 此 处 固定 n) 而 且 随 机 变量 2 ”是 相互 独立 的 ， 四 此 ， 
母 函数 P, 是 下 述 复 合 函数 ， 

P, (s)=PC(P,-1(s)). (4. 2) 
此 公式 使 我 们 能 够 递归 地 计算 出 所 有 的 母 函 数 . 由 《〈4.2)， 我 们 有 : P: CS) = 
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PCP(s)),P;(9) =PCP2(3)), SF. 虽然 P, 的 精确 表示 式 难 于 得 到 ， 但 计算 是 直接 
的 ， 尽 管 如 此 ， 仍 然 可 以 从 (4.2) 得 出 许多 重要 的 结论 . 

例 (a) 假 定 直 接 后 代 的 个 数 服 从 几何 分 布 {gp*}， 此 处 pga WW PCs) = 
gq/(1 一 ps)， 对 P,P， 等 等 进 和 TROT (要 而 b) 可 得 一 般 公 式 : 
”一 人 l) ps 


P, (Cs) =q ° eae (4, 3) 
容易 验证 : (4.3) 确实 满足 (4. 2). 
如 果 p—q. 在 (4.3) 中 令 p 一 目 得 
—a—(n—-1)s — 
PCs = . (4.4) 
注意 : “poet. P,O) —>q/p; 但 当 p 志 gq 时，P,(0) 一 1]， 我 们 将 要 解释 这 一 结果 ， 
并 对 任意 分 布 {p;} 找 出 类 似 的 结果 . > 


关于 分 支 过 程 的 第 一 个 问题 是 : 分 支 过 程 是 否 永 远 继续 下 去 ， 或 者 在 有 限 代 以 
后 其 子孙 死 光 ， 令 


x, =P{Z,=0}=P, (0). (4.5) 
这 是 过 程 在 第 n 代 或 第 nn 代 以 前 结束 的 概率 ， 由 定义 , =p, BH 4.2) OH: 
z= P(x,,). (4. 6) 


极端 情形 b 二 0 或 po 二 1 是 不 足 道 的 ， 所 以 我 们 假设 0 二 po 二 1， BA. BPH 
性 断言 : xz: = PD >PO ST, 从 而 用 归纳 法 可 证 : m Krn An K. 因此 存在 极 
IBe<l, Ab (4.6) BU 
x=P(xr). (4.7) 

“OSIM. POMBE: MORRELAYD A O0. p) 开始 而 终于 分 角 线 上 的 
点 (1.1) 的 一 条 凸 曲线. 因此， 只 有 两 种 可 能 的 情况 : 

情况 (a) 图 形 完 全 在 分 角 线 上 方 . 在 此 情 癌 下 ，z=1 是 (4.7) 的 惟一 一 个 根 ， 
所 以 工 一 1， 此 外 ， 在 这 种 情况 下 ，1 一 P() 和 过 1 一 : (对 一 切 ;), 令 ;一 1， 我 们 发 现 
导数 P'(1) 满 足 不 等 式 POSI. 

情况 (b)P 的 图 形 与 分 角 线 交 于 某 一 个 o 二 1， 因 为 一 条 则 曲线 与 直线 最 多 交 于 两 
Ay FESS. 4 s <stt, PO >s, MA o<s <1], Pisd<s. P z =P 
(O<P(o)=co. 用 归纳 法 ，z =P, D) <P) =o. HEHH: 2,70, AM r=o. 
另 一 方面 ， 由 中 值 定理 ,在 与 1 之 间 存 在 一 点 ， 在 这 一 点 上 ，P 等 于 1。 此 导数 是 
单调 的 ， 所 以 P O>. 

因此 ， 这 两 种 情况 分 别 是 由 P (1) 志 1 和 PC)>>1 来 作 其 特征 的 ， 但 是 


p= PD = Yk <= (4. 8) 


是 直接 后 代 的 期 望 值 ， 因 此 ， 我 们 有 下 述 术 有 趣 的 定理 ， 
定理 wul, Nit CRRA 1 地 死亡 ， 然 而 当 j 之 1 时 ， 过 程 在 第 nn 代 或 第 
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n 代 以 前 终止 的 概率 工 , 趋 于 方程 式 (4.7) 的 惟一 的 一 个 根 工 所 1. 

在 实际 中 ，x, 一 z 通常 收敛 得 很 快 ， 因 此 ， 要 么 过 程 以 很 大 的 概率 很 快 就 终止 
了 ， 要 么 过 一 直 持 续 下 去 ， 第 nn 代 的 个 数 的 期 望 值 为 EC(2Z,) 二 P',(1)， KM (4.2) 得 
到 链 式 规则 ，P’, (1)==P' OOP, a OSE, AES 

EZ) = pe (4. 9) 

当 过 1 时 ， 过 程 会 灭绝 的 事实 不 足 为 奇 , 但 是 ， 其 至 当 jy 二 1 时 都 达 不 到 稳定 
却 不 甚 显然， 当 记 1 时 ， 根 据 (4. 9) ， 可 以 期 望 后 代 个 数 会 呈 几 何 级 数 增长 . 在 平 
均 意义 上 ， 这 是 对 的 ， 但 不 管 多大， 灭绝 概率 都 是 有 限 的 . 易 见 ， 对 一切 ;二 1 都 
有 P,(s) 一 +， 这 意味 着 s，s ，、ss… 等 等 的 系数 都 趋 于 0。 因 此 ， 经 过 充分 大 的 代数 以 
后 ， 大 致 上 说 ， 或 者 没有 后 代 子 孙 了 ， 或 者 有 非常 多 的 后 代 子 孙 (对 应 的 概率 分 别 
为 + 和 1 一 zx). 


12.5 分 文 过 程 的 总 后 代 


现在 ， 我 们 把 注意 力 转 向 随机 变量 
YY 二 1 十 如 二 十， (5.1) 
这 是 第 nn 代 以 前 (EE n RAD 0 代 一 始祖 ) 的 后 代 的 总 数 . 令 ”一 <2， 得 到 了 后 代 
的 总 数目 ， 它 可 以 是 有 限 数 也 可 以 是 无 穷 大 ， 显 然 ， 对 每 个 n， 随 机 变量 Y, 都 是 有 
定义 ， 令 其 母 函 数 为 民 ， AWY,=14Z,, MUR (s)=sP(s). WAMAE-DH 
推理 导出 R, 的 递 推 公式 ， 惟 一 的 不 同 之 处 在 于 : 必须 把 始祖 加 进 第 1 代 的 ZZ, 个 人 员 
的 求 和 中 去 ， 因 此 ， 
R, (s) =sPCR-1 (s)). (5. 2) 
从 此 递 推 公式 ， 理 论 上 可 以 逐次 计算 R ,R,,…， 但 是 工作 量 大 .幸运 的 是 ， 可 以 用 
上 一 节 在 推导 灭绝 概率 x 时 曾经 使 用 过 的 几何 推理 来 讨论 尺 , 的 渐 近 性 质 . 
首先 注意 : 对 于 每 个 *<1 有 


RCs) =sPCR, Cs) <sPGs) SR; Cs) (5.3) 
用 归纳 法 可 推出 R,(3) 二 R, ;(s)， 所 以 R,(s) 单 调 下 降 到 一 个 极限 p(s)， 而 后 者 满足 : 
ols) =sPCols)), O<s <l. (5. 4) 
由 第 11.6 节 连 续 性 定理 知 ， 作 为 概率 母 函 数 的 极限 的 op， 它 必 是 某 个 满足 pi 二 1 的 
非 负 数列 {ps) 的 母 肾 数 . 
由 (5.4) 得 知 ， 对 每 个 固定 的 *<1,o(Cs) 是 下 列 方程 式 的 一 个 根 : 
t=sP(Q). (5. 5) 


下 证 此 根 是 惟一 的 ， 为 此 目的 , 令 Be = POORER Hrs). ES 


1, 原著 在 此 处 误 把 Z, BSR Xn 一 一 译 者 注 
2. 此 节 吸 收 了 文献 [82] WARK. 
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y=sP(s) GEE) 是 上 的 凸 函数 ， 所 以 其 图 形 与 直线 y=: 至 多 交 于 两 点 .但 是 ， 当 1 
一 0 时 ，(5.5〉 的 右边 大 于 左边 ， 而 当 t 二 x 时 ，(5.5》 的 右边 小 于 左边 ，t 二 1 亦 然 . 
所 以 (5.5) 在 0 与 + 之 间 恰 有 惟一 一 个 根 ， 而 在 zx 与 1 之 间 没 有 根 . 因此 OER 
惟一 的 一 个 根 ， 且 pC3) 二 zx， 但是， 显然 ODE 1 二 PG) 的 一 个 根 ， 叉 因为 x 是 此 方程 
的 最 小 的 根 ， 从 而 o(1) 二 zx. 换言之,，p 是 一 个 “诚实 的 ”(honest) PES Et RAAHAA 
Z 一 1]， 现 在 ， 我 们 可 以 总 结 上 述 结果 如 下 : 
令 由 是 总 后 代 恰 伟 & 个 成 员 的 概率 . 
(a) Do 等 于 灭绝 概率 工 (而 1 一 x 等 于 具有 无 穷 个 总 后 代 的 概率 ). 
(b) BK os) = Dost 由 方程 式 〈5.5) 的 惟一 的 那个 根 所 给 出 ， 而 且 OG). 
我 们 已 经 知道 ， 当 wz 委 1 时 ， 概 率 为 1 地 使 总 后 代 之 个 数 为 有 限 . 微分 (5. 4) 
得 到 ， 当 :<1 时 ， 其 期 望 等 于 1/(1 一 jy); 当 y 王 1 时， 其 期 望 为 2. 
例 (a) 在 第 4 节 例 (a) 中， 我 们 已 知 PCs) 二 gq/ (1 一 ps)， 从 而 (5. 5) 化 为 二 次 
HER: pr 一 t 十 qs 二 0， 由 此 得 . 
、 11— f/i—4pes 
os) = 2p , 
(此 母 函 数 在 第 11. 3 节 中 讨论 初 过 时 曾经 遇 到 过 , ) 
(b) 忙 期 ， 现 在 ， 转 而 详细 分 析 第 3 节 例 (d) 中 提 及 的 排队 问题 . 为 简单 起 见 ， 
假定 在 任 一 瞬间 只 能 来 一 个 顾客 ， 而 且 只 在 整数 值 的 时 刻 : 到 来 ， 假 定 顾客 的 到 来 依 
伯 努 利 试验 而 行 ， 在 时 刻 n， 一 个 顾客 到 来 的 概率 为 p， 而 无 顾客 到 来 的 概率 为 q= 
1 一 p。 当 服务 设施 空闲 时 ， 一 个 到 来 的 顾客 立刻 得 到 服务 ， 和 否则 他 加 和 人 队列 《等 行 
队列 )， 只 要 队列 中 有 顾客 要 求 服务 ， 此 服务 设施 就 不 会 中 断 服 务 ， 最 后 我 们 假定 ; 
每 个 顾客 的 服务 时 间 是 相互 独立 的 〈 整 值 的 ) 随机 变量 ， 它 们 具有 公共 的 分 布 18.}， 
对 应 的 母 函数 为 BCs) = 2 Bes 


假定 时 刻 0 到 来 的 顾客 发 现 服务 设施 是 空闲 的 ， 他 的 服务 时 间 立 即 开 始 ， 如 条 
服务 时 间 长 为 nx， 而 在 时 刻 1,2,…,n 又 没有 新 的 顾客 到 来 ， 则 在 时 刻 n IRS eH 
变 成 空 益 了， 否则 服务 将 不 中 断 的 继续 下 去 ， 所 谓 忙 期 ， 就 是 从 时 刻 0 开始 一 直 继 
续 服 务 而 未 中 断 的 那 一 段 期 间 ， 现 在 ， 我 们 证 明 : 分 支 过 程 理论 可 以 用 于 分 析 忙 期 ， 

在 时 刻 0 到 来 的 顾客 开始 了 忙 期 ， 因 此 我 们 称 之 为 始祖 ， 在 始祖 服务 终止 的 时 
刻 和 此 前 的 时 刻 到 来 的 顾客 可 视 为 第 1 代 ， 如 果 没 有 这 种 直接 后 代 ， 则 过 程 结束 . 
否则 ， 这 些 直接 后 代 相继 地 去 接受 服务 ， 在 他 们 服务 时 间 内 ， 他 们 的 直接 后 代 义 加 
入 队列 ， 我 们 此 处 得 到 的 分 支 过 程 的 灭绝 概率 等 于 : 一 个 忙 期 结束 的 概率 ， 而 且 总 
后 代 个 数 等 于 在 忙 期 内 来 到 的 顾客 (BE) 个 数 ， 无 需 说 ， 只 有 对 x 二 1 的 队 


(5. 6) 


1. 按照 中 国 概率 界 的 习惯 , “honest” 通 译 成 “诚实 的 ” ”一 -- 译 者 注 
2 沿用 赖 尔 登 (Riordan) 的 术语 ， 时 间 轴 上 的 点 用 时 刻 〈epoch) 表示 ， 其 他 的 术语 ， 如 时 间 、 时 
刻 …… ， 有 许多 其 他 的 含义 ， 
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列 ， 在 实际 中 才 是 适宜 的 . 

为 了 应 用 我 们 的 结果 ， 需 要 用 到 征 接 后 代 的 个 数 的 母 注 数 P(s)， 根 据 定 义 ， 下 
接 后 代 的 个 数 由 随机 和 Xi 十 … 十 Xn 所 决定 ， 其 中 {X;} 是 相互 独立 的 随机 变量 且 XX， 
分 别 以 概率 p 和 9g 取 值 1 和 和 0， 而 NN 是 始祖 的 服务 时 间 的 长 度 .， 因 此， 在 现在 的 情况 
下 ，P(s) 二 BC(ps 十 9)， 从 而 二 po， 此 人 处 5 一 8 (1) 是 服务 时 间 的 期 望 值 . 由 此 推出 : 
RAS po 委 1 时 ， 忙 期 才 一 定 会 结束 ， 只 有 当 po < 1 时 ， 一 个 忙 期 内 到 来 的 顾客 数 
目的 期 望 值 才 是 有 限 的 、 换 名 话说 ， 当 pc 三 1 时 ， 保 证 很 拥挤 ， 除 非 po 适当 地 小 于 
1， 整 天 排 长 队 是 必然 规律 . 

(c) 忙 期 的 持续 时 间 .， 上 例 仅 考虑 了 一 个 忙 期 内 的 顾客 数 ， 但 实际 上 ， 一 个 忙 期 
究竟 要 持续 多 长 ， 是 一 个 很 有 趣 的 问题 ， 为 解决 此 问题 ， 可 采取 下 述 方法 : 把 一 个 
时 间 单 位 看 作 分 支 过 程 的 一 个 元 素 ， 当 时 刻 n 没有 顾客 到 来 时 ， 称 时 刻 n 没有 后 代 . 
如 果 时 刻 n 到 来 的 顾客 的 服务 时 间 持 续 了 r 个 时 间 单 位 ， 则 时 刻 ntl, nr 视 为 
IR Hin 的 直接 后 代 ， 假定 在 时 刻 0 服务 设施 是 空闲 的 ， 略 为 返 思 一 下 就 会 发 现 ， 从 
时 刻 0 开始 的 分 支 过 程 ， 或 者 一 直 进 行 下 去 ; 或 者 其 持续 时 间 恰 恰 等 于 从 一 个 新 病 
客 到 来 时 开始 的 不 间断 的 服务 时 间 的 持续 时 间 . 其 直接 后 代 的 数目 的 母 肾 数 为 ; 

P(s)=qt pps). (5.7) 
其 根 x 是 忙 期 结束 的 概率 ， 总 后 代 的 个 数 为 1 的 概率 是 g9， 而 p 是 “其 总 后 代 的 个 数 
等 于 从 时 刻 0 开始 的 一 个 忙 期 的 持续 时 间 的 长 度 ” 的 概率 ， 显 然 ， 忙 期 的 持续 时 间 
的 长 度 的 母 澳 数 为 ， Bo(s) )， > 


12.6 Y 题 


L 分 布 (1,1) 具有 均值 ECN)E(CX) 和 方差 ECN) Var(X)+Var( NDE’ (X). ATARE 
法 验证 之 : (a) 母 函 数 法 ; (b ARE MAA Se. 

2. 陷 兽 阱 [第 1 节 例 Cb). 如果 ({g.}) 是 几何 分 布 ， 则 和 欲求 之 分 布 亦 然 ;! 如 果 {&o} 是 对 数 分 
布 【参见 〈2. 8)]， 则 欲求 之 分 布 为 具有 附加 项 的 对 数 分 布 . 

3. 设 N 是 一 个 服从 泊 松 分 布 的 随机 变量 ， 则 在 N 次 伯 努 利 试验 中 ， 其 成 功 次 数 与 失败 次 数 
是 两 个 相互 独立 的 随机 变量 ， 试 将 此 结果 推广 到 多 项 分 布 中 去 . a 直接 推广 ; Cb) 有 有 
多 元 母 函 数 的 方法 .， [参见 第 9. 1 节 例 Cd). J 

4. 随机 化 . 设 六 具有 均值 为 的 泊 松 分 布 ， 并 将 N 个 球 随 机 地 放 入 1 个 盒 中 ， 不 用 计算 证 
HW: 恰 有 和 产 个 空 盒 的 概率 为 ， 


H jer In 1l—e*" ho”, 
5. GREAD? WE: (国定 的 正 整数 个 球 随机 地 放 入 个 盒 中 恰 及 个 盒 空 着 的 概率 


1. 此 法 源 自古 德 (LJ. Good) ， 参 见 第 3 节 例 (d 中 的 引文 [80]. 
2, 此 处 用 随机 化 一 个 参数 的 方法 ， 导 出 各 种 漂亮 的 组 合 公 式 ， 源 出 文献 L83]. 


10. 
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是 上 述 表 达 式 中 e /r! 的 系数 .(a) 讨论 与 矩 母 函数 的 联系 (第 11.7 24). (b) 
应 用 第 2 章 (11.7) 的 一 个 不 难 的 推导 ， 
概率 分 布 的 混合 ， 设 {fi} 和 {gi;} 是 两 个 概率 分 布 ，a 0,8 > 0,atB=1, Wafi tee Vs 
然 是 一 个 概率 分 布 ， 讨 论 它 的 意义 及 其 与 第 5. 2 节 饶 子 模 型 中 的 联系 ， 推广 到 两 个 以 上 
的 分 布 的 情况 ， 证 明 此 种 混合 能 成 复合 沾 松 分 布 . 
用 母 玉 数 法 证 明 :， 对 分 支 过 程 有 下 述 关 系 Var(X) =pVar(X,) tea. 用 条 件 期 望 证 
明 等 价 的 关系 : Var( Xi.) = 好 Var(CX) 十 pa2， 用 此 二 关系 中 的 一 个 证 明 Var(X, ) = 
7 GET? + Hetu “ly. 
GRELA). # n>m, WWE ECX,X,) =p "ECX). 
(4¢ L). WEAR (Xn XD WOTTER Palsi Prim (so ))， 并 用 此 以 证 明 上 题 之 论断 . 
具有 两 类 质点 的 分 支 过 程 ， 假 定 每 个 质点 均 能 产生 各 种 类 型 的 质点 .两 种 类 型 的 后 代 的 
ANB A BS ac EE PR Pi(si ,sz) 和 PCs ,sz) 所 决定 . 于是， 有 两 个 依赖 于 质点 失 型 的 灭 
绝 概 率 x Aly. 证 明 数 对 (x,y) 满 足下 列 方程 式 组 : 

X=Pi(zy), y=P; (zx,y). (6.1) 
证 明 上 述 方程 式 组 在 0S <1,0Sy s1 上 至 多 只 有 一 个 异 于 (1,1) WR, MA C.D 
是 方程 组 (6.1) 的 惟一 的 一 组 根 的 充分 必要 条 件 是 : 

_ OP;(1,1) 


msl ;122 <I „HC — m: ) C1 — uz ) 之 /2 par ,此 处 fy Os; 
J 
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13.1 直观 导 引 与 例子 


我 们 将 要 人 研究 与 重复 试验 有 关 的 能 够 重复 (或 篇 环 ) 出 现 的 事件 样 型 .粗略 地 
说 ， 下 面 的 理论 人 研究 的 是 具有 下 述 性 质 的 样 型 58 : 在 8 每 次 出 现 以 后 ， 试 验 重 新 开 
始 ， 且 8 出现 以 后 重新 开始 的 试验 是 整个 实验 的 重复 ， 请 次 8 出 现 的 等 待 时 间 序 列 是 
一 个 相互 独立 的 具有 公共 分 布 的 随机 变量 序列 . 

最 简单 的 特例 是 :8 代表 伯 努 利 试验 序列 中 “出 现 一 个 成 功 “， 一 直到 第 1 次 成 
功 为 止 的 等 竺 时间 服 从 几何 分 布 . SS 1 次 成 功 出 现 后 ， 试 验 重 新 开始 ， 第 KRM 
到 第 -十 1 次 成 功 之 间 的 等 待 时 间 服 从 相同 的 几何 分 布 ， 一 直到 第 -次 成 功 为 止 ， 所 
需 的 等 待 时 间 是 ~ 个 相互 独立 的 随机 变量 之 和 [参见 第 9. 3 节 例 CO]. BERNE 
“出 现 一 个 成 功 且 紧 随 之 出 现 一 个 失败 ”时 ， 上 述 讨论 亦 然 有 效 ， 样 型 SF 发 生 以 后 ， 
实验 像 最 初 一 样 重新 启动 ， 到 下 一 次 样 型 SF 出 现时 所 需 的 等 待 时 间 与 前 面 那 些 试验 
独立 ， 反 例 ， 在 某 一 人 群 中 ， 一 个 一 个 地 选取 并 考察 其 生日 ， 令 8 代表 “样本 中 有 两 
个 人 有 相同 的 生日 "， 则 8 不 是 重复 ， 因 为 它 一 旦 发 生 ， 以 后 就 一 直 保 持 下 去 . 如果 
我 们 把 8 的 定义 改 为 “新 加 进 样本 的 人 的 生日 已 经 在 原样 本 中 出 现 过 "， 则 8 可 以 发 
生 任 意 多 次 ， 但 是 ， 当 8 发 生 以 后 ， 过 程 不 是 从 原始 的 情况 开始 . 这 是 因为 样本 大 小 
的 增加 ， 使 出 现 重复 生日 更 容易 ， 第 1 次 出 现 重 复生 日 的 等 行 时 间 人 鳄 长， 第 2 次 出 现 
重复 生日 的 等 待 时 间 愈 短 ， 所 以 等 待 时 间 序 列 既 不 相互 独立 也 没有 公共 分 布 ， 

循环 样 型 理论 的 重要 性 ， 源 于 这 种 样 型 经 常 出 现在 各 种 随机 变量 序列 〈 随 机 过 
程 ) 中 ， 控 制 随机 变量 序列 的 规律 ， 可 能 很 复杂 ， 也 不 易 排 除 完 整 的 分 析 ， 但 是 ， 
循环 样 型 的 存在 ， 却 往往 可 以 讨论 其 本 质 性 质 和 某 些 极限 的 存在 性 ， 等 等 ， 这 种 手 

段 给 许多 理论 很 好 地 提供 了 简单 的 统一 的 处 理 方法 . 

下 面 给 出 几 个 典型 的 例子 ， 其 中 有 些 是 非常 有 趣 的 ， 第 一 个 例子 是 关于 丈 知 的 
伯 努 利 试验 序列 ， 而 其 后 三 个 例子 涉及 较 复 杂 的 模型 ， 在 它们 的 描述 中 ， 我 们 用 到 
了 “服务 ”" “顾客 ”等 术语 ， 但 是 在 每 个 例子 中 ， 都 给 相应 的 随机 变量 序列 以 精确 
的 完整 的 数学 定义 ， 它 们 能 惟一 地 决定 所 有 可 能 的 事情 的 概率 . Sik, AMER 
概率 可 以 精确 计算 ， 而 且 还 可 以 导出 有 关 重 复 样 型 的 一 些 有 意义 的 续 采 . 

Gl (a) 返 回 平衡 。， 在 一 个 伯 努 利 试验 序列 中 ，& 表示 “成 功 的 累积 次 数 等 于 失 
败 的 累积 次 数 ”"， 正 像 我 们 以 前 做 过 的 ， 我 们 用 相互 独立 的 分 别 以 概率 p 和 g 取 值 1 
和 一 1 的 随机 变量 序列 X ,X;,… 来 描述 试验 序列 ， 和 通常 一 样 ， 令 
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So=0, S,= XM tee TX, C1. 1) 
则 S, 是 累积 的 成 功 次 数 超过 累积 的 失败 次 数 ， 而 且 8 当 且 仅 当 S, 一 0 时 发 生 ， 无 需 
PER ay A : 此 事件 发 生 以 后 ， 重建 原始 状态 ， 即 是 ， 子 部 分 和 序列 Sari o Sete 9° FE 
整个 序列 S$ ,S ,… 的 一 个 概率 的 复制 . [第 4 Bl (b) 还 将 继续 讨论 . J 
(b) 从 负 值 返回 平衡 ， 把 上 例 进 行 修 改 ， 称 8 在 第 了 次 试验 发 生 ， 如 果 
S,=0, 4 9<0，…，9 -1 <0. (1.2) 
还 是 一 样 ， 易 卸 : 8 发 生 以 后 ， 过 程 再 从 头 开 始 ，[ 第 4 市 例 〈dq) 还 将 继续 . | 
Cc) fil (a) 的 另 一 个 变 例 是 : 事件 8 代表 成 功 的 累积 次 数 是 失败 的 累积 次 数 的 》 
f, (此 处 是 任意 一 个 固定 的 常数 . ) 如 果 8 在 第 ?次 试验 发 生 ， 它 册 在 第 nn 十 m 次 
试验 发 生 ， 只 有 在 第 十 1,…， 第 nn 十 m 试验 中 ， 成 功 次 数 是 失败 次 数 的 4 售 才 行 . 
因此 ，8 接连 两 次 发 生 之 间 的 等 待 时 间 是 独立 同 分 布 的 ， 作 为 一 个 特例 ， 考 虑 掷 一 颗 
均匀 的 仍 子 6n 次 恰巧 出 现 n 次 义 点 这 一 事件 ，( 习 题 4 一 5 还 要 继续 讨论 . ) 
(dd) 阶 梯 随 机 变量 ， 沿 用 例 @ HAS. 定义 一 个 新 的 样 型 8 如下， WES, 超 
过 前 面 折 有 的 和 ， 即 
S, >00, S, >$ 9°55, > Snt (1.3) 
则 说 8 在 第 了 次 试验 发 生 . 
如 果 8 在 第 ”次 试验 发 生 ， 则 过 程 按 下 述 意 义 重 新 开始 ， 假 定 (1. 3) ma, & 
在 第 ntm 次 试验 发 生 当 且 仅 当 : 
Spim > Sp ytte y emo 1 (1.4) 
但 是 ， 7 Stk T On 是 剩余 序列 X ntl DE ,的 部 分 和 ， 从 而 8 由 剩余 序列 定义 的 循 
环 性 与 由 全 序列 定义 的 循环 性 是 完全 一 样 的 ， 换 句 话 说， 对 8 的 研究 ， 与 它 每 次 发 生 
的 时 刻 以 前 的 全 部 过 去 的 历史 是 无 关 的 [第 4 节 例 Cd) 还 将 继续 讨论 . , 
(e) 伯 努 利 试验 序列 中 的 成 功 连贯 ， 在 前 面 的 例子 中 ，8 是 直接 定义 的 ， 现 在 我 
们 转 而 研究 另 一 种 情况 ， 邵 是 给 出 循环 样 型 以 严谨 的 定义 ， 使 这 种 理论 更 便于 应 
用 .在 古典 的 文献 中 ，“ 长 为 r 的 成 功 连 贯 ” 的 意思 是 : PARED ar PATH 
成 功 序列 .这 两 种 表述 都 不 能 导出 循环 样 型 BN, MRK Ar KMD, A 
么 ， 在 第 ntl 试验 出 现成 功 时 ， 就 会 把 在 第 nn 次 试验 就 已 完成 的 那个 连贯 破坏 掉 ; 
另 一 方面 ， 如 果 要 求 至 少 有 > 次 成 功 ， 那 么 ， 每 一 个 连贯 可 以 无 限制 的 延长 . 显 
然 ， 一 个 连贯 发 生 后 ， 不 可 能 重建 初始 状态 .古典 连贯 理论 比较 混乱 ， 引 进 较 系统 
的 处 理 方 法 是 可 能 的 ， 这 就 是 定义 长 为 7 的 连贯 为 循环 样 型 .第 1 个 长 为 r 的 连 员 
是 惟一 定义 的 ， 我 们 约定 : 从 每 个 连贯 发 生 的 时 刻 以 后 重新 计数 .按照 这 种 约定 ， 
在 序列 SSS|SFSSS |SSS|F H, BHA 3 个 长 为 3 的 成 功 连贯 (它们 发 生 在 第 3,8,11 
次 试验 )， 它 恰 售 5 个 长 为 2 的 成 功 连贯 (它们 发 生 在 第 2,4,7,9,11 次 试验 )， 正 
式 的 定义 如 下 : 一 个 由 画 个 字母 S 和 下 构成 的 序列 ， 它 包 钨 的 长 为 了 的 护 连 员 的 个 
数 ， 等 于 这 样 一 些 既 不 间断 又 不 重 司 的 区 段 的 个 数 ， 其 中 每 个 区 段 内 恰 含 r 个 SS 
根据 这 种 定义 ， 我 们 说 ，8 发 生 在 第 n 次 试验 ， 如 果 一 个 长 为 r 的 连贯 在 此 时 加 进 
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了 该 序列 ， 这 就 定义 了 循环 样 型 而 且 在 不 影响 其 基本 面貌 的 前 提 下 大 大 地 简化 了 理 
w: ER 7 节 中 将 继续 讨论 . ) 

(了) 续 上 例 ， 相 关 的 样 型 ， 显然 ， 上 一 个 例子 中 所 考虑 的 问题 ， 可 以 应 用 到 更 
一 般 的 样 型 中 去 ， 例 如 SFSF 的 发 生 . 有 趣 的 情况 是 : 给 定 的 样 型 不 子 限制 . 因此 ， 
“两 次 成 功 和 三 次 失败 ”的 发 生 定 义 了 一 个 重复 事件 ， “或 者 一 个 长 为 r 的 成 功 连 
A, 或 者 一 个 长 为 o 的 失败 连贯 ”的 发 生 ， 也 定义 了 一 个 重复 事件 .，( 在 第 8 PH 
还 要 继续 . ) | 

(g) 盖 革 计 数 器 ， 用 于 宇宙 射线 和 a- 质点 的 计数 器 的 型 号 可 以 用 下 列 人 简单 模 
型 :来 描述 ， 按 一 致 的 速率 来 进行 伯 努 利 试验 .一 台 计 数 器 用 来 记录 成 功 ， 但 是 每 次 
记录 以 后 ， 机 器 要 对 /一 1 次 试验 锁 住 ， 换 名 话说 ， 在 第 ”次 试验 记录 了 一 个 成 功 当 
且 仅 当前 7 一 1 次 试验 未 予 记录 .计数 器 在 7 十 1,…,n 十 r 一 1 次 试验 是 锁 住 的 ， 而 且 
当 第 ntr 次 试验 的 结果 为 失败 时 ， 计数器 重新 开启 ， 计数器 的 输入 量 依 赖 于 试验 . 
每 次 记录 都 有 后 效 ， 但 是 ， 当 计数 器 开 着 〈 不 是 锁 着 ) 的 时 候 ， 情 况 是 完全 一 样 的 ， 
并 且 试 验 重新 开始 . 邻 8 表 示 “ 试 验 的 结果 使 计数 器 开店”， 则 8 是 一 个 典型 的 循环 
事件 . [第 4 节 例 Ce) 将 继续 讨论 , 

(h) 最 简单 的 排队 过 程 ， 由 一 个 伯 努 利 试验 序列 和 一 个 只 取 正 整数 值 的 随机 变量 
序列 X , 尺 ; ，,… 所 定义 ，{Xi} 具 有 公共 分 布 {B}， 而 且 不 仅 它们 彼此 相互 独立 且 与 伯 
努 利 试验 序列 也 相互 独立 ， 我 们 把 第 nn 次 试验 成 功 解释 在 时 刻 n: 有 一 个 顾客 来 到 服务 
设施 (或 者 一 次 呼叫 来 到 电话 交换 机 )、X, 代表 来 到 服务 设施 的 第 n 个 顾客 的 服务 时 
间 ， 在 每 一 个 时 刻 ， 服 务 设施 或 者 是 “空闲 的 ”或 者 是 “忙碌 的 "， 而 且 过 程 依据 下 
述 规 则 进行 ， 开始 (在 时 刻 0)， 服 务 设施 是 空闲 的 ， 在 服务 设施 空闲 时 来 到 的 顾客 
立即 被 服务 ， 但 是 在 此 顾客 的 被 服务 期 间 到 来 的 顾客 ， 服 务 设施 处 于 忙 期 ， 在 服务 
设施 处 于 忙 期 到 来 的 顾客 构成 一 条 等 待 队 列 . 服务 设施 不 间断 地 为 顾客 服务 ， 一 直 
到 无 顾客 要 求 为 止 ， 此 规则 惟一 地 决定 了 这 个 过 程 ， 对 于 给 定 的 顾客 到 来 的 过 程 的 
样本 序列 (S,F,S,S,S,F,F,…)， 和 相继 的 服务 时 间 的 样本 序列 (3,1,17,2,…)， 不 
WERE: 在 每 一 个 时 刻 队长 是 多 少 ， 第 n 个 到 来 的 顾客 的 等 待 时 间 是 多 少 ， 理 论 上 
讲 ， 我 们 应 算出 所 有 的 相关 的 概率 ,但 是 找到 实际 可 行 的 方法 并 不 容易 。 显 然 ， 服 
务 设施 的 每 一 个 空闲 时 间 ， 其 情况 与 时 刻 0 完全 一 样 . 因 此， 用 我 们 的 术语 来 说 ， 
“服务 设施 空闲 ”这 种 偶然 事件 构成 一 个 循环 样 型 ， 我 们 将 要 看 到 ， 这 样 一 个 经 常 有 
的 循环 样 型 具有 重要 的 结果 ， 例 如 ， 它 蕴涵 在 时 刻 n 的 队长 的 概率 分 布 ; 第 ?个 到 来 
的 顾客 的 等 待 时 间 ;， 和 相应 的 随机 变量 序列 当 mn 一 2 时 所 趋 于 的 确定 的 极限 (定理 
5. 2)， 换 句 话 说 ， 循 环 事 件 的 存在 ， 使 我 们 能 够 证 明 稳 定 状态 的 存在 和 分 析 它 的 最 


1. 这 是 1 型 计数 器 的 离散 模式 ， 匡 型 计数 器 在 习题 8 中 讨论 . 
2. 我 们 用 时 刻 表示 时 间 轴 上 的 一 个 点 ， 术 语 等 待 时 间 考 虑 为 一 个 时 段 ， 这 些 习 语 是 由 雷 阿 德 引进 的 . 
因为 在 排队 论 中 ， 时 间 、 时 刻 等 等 的 各 种 含义 容易 引起 误会 ， 
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本 质 的 性 质 . 

(D 机 器 维修 .现在 用 循环 样 型 来 处 理 另 一 个 与 上 例 不 同 的 例子 ， 比 例 中 来 到 的 
“顾客 ”不 再 遵从 但 努 利 试验 上 所 固有 的 规律 ， 为 确定 起 见 ， 在 此 例 中 ， 把 “顾客 ” 理 
解 为 同一 类 的 机 器 群 出 现 损毁 ， 而 “服务 ”理解 为 修理 . 我 们 仍然 沿用 服务 与 队列 
结构 的 习 语 ， 但 是 在 机 器 损毁 时 GR “MAR BR"), SERRA. BERA 
N 台 机 需 ， 并 考虑 两 个 极 闯 的 情形 

。 首先 假定 一 直 处 于 工作 状态 的 机 器 ， 在 下 一 个 时 刻 损 毁 的 概率 为 p SET 

时 ， 就 用 一 台 同 一 类 型 的 新 机 器 来 替代 ， 而 服务 时 间 理 解 为 安装 一 台新 机 笑 
所 需要 的 时 间 . 我 们 假定 这 六 台 机 器 是 相互 独立 的 ， 而 且 它们 的 损毁 由 N 次 
独立 伯 努 利 试验 序列 来 控制 . 注意 ; 较 多 的 机 闫 在 队列 中 ， 而 较 少 的 机 徊 处 
于 工作 状态 ， 因 此 ， 任 何 一 个 时 刻 的 队长 都 影响 新 到 来 的 顾客 〈 或 要 求 服 务 
的 呼唤 ) 的 概率 ， 这 与 前 一 个 例子 明显 不 一 样 ， 但 是 , “服务 设施 空闲 着 ” 仍 
然 构 成 一 个 循环 样 型 ， 因 为 当 它 发 生 以 后 ， 我 们 面 对 的 是 完全 一 样 的 情形 . 

。 现 在 假定 每 次 修理 后 都 有 后 效 ， 其 后 效 是 将 来 损毁 的 概率 增 大 了 .这 意味 着 : 
机 器 经 过 修理 后 性 能 变 坏 了 ， 它 再 也 不 能 恢复 到 开始 时 的 状态 了 .在 这 种 情 
况 下 ， 就 没有 循环 样 型 来 帮 我 们 分 析 问 题 了 . 4 
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考虑 一 个 具有 结果 已 (=1,2,…) 的 重复 试验 序列 ， 它 们 不 必 独 立 〈 在 马尔 
可 夫 链 中 的 应 用 特别 有 趣 )， 和 通常 一 样 ， 原 则 上 假定 试验 可 以 进行 无 穷 多 次 ， 
而 且 概 率 P{E, ,E; ,…,EE; } 可 以 相 容 地 对 一 切 有 限 序 列 给 予定 义 . ME EA RF 
列 的 一 个 属性 ， 即 是 假定 对 每 个 有 限 序 列 ( 书 E ，… 已 )， 可 以 惟一 地 判定 亡 是 
否 具 有 属性 8， RMME. iB “EE (有限 或 无 穷 ) 序列 E; Ese PHB nt 
TRAER” Æ “PFI E, ,E,,… E BABES” WM, He, EER NK 
试验 中 出 现 仅 仅 依赖 于 前 7 次 试验 的 结果 ， 易 见 ， 当 我 们 说 及 “循环 事件 86” 的 
时 候 ， 实 际 上 ， 我 们 所 指 的 是 一 类 用 8 的 出 现 这 一 性 质 所 定义 的 事件 .所 以 ,与 
其 说 8 本 身 是 一 个 事件 ， 倒 不 如 说 它 是 一 个 符号 ， 我 们 在 此 处 滥用 了 一 句 语 ， 但 
是 这 应 该 能 接受 ， 正 如 问题 本 来 没有 维 数 ， 但 是 “一 个 二 维 问题 ”的 说 法 ， 人 们 
通常 还 是 能 够 接 党 的 . 

定义 1 属性 8 定义 了 一 个 循环 事件 ， 如 果 : 

(a) 为 使 8 在 序列 (EE, BE) 的 第 nn 个 和 第 n 十 m 个 位 置 出 现 ， 其 充分 必要 
条 件 是 6 在 两 个 子 序列 (EE ,已 ,… ED CE, Bo E ) 的 最 后 的 位 置 出 现 . 

(b) 如 果 86 在 第 nn 个 位 置 出 现 ， 则 有 恒等式 : 

P{E, pe, E_S PLE, ot E PE ts Ey}. 
ME, RINE “EFIKE ,E,,…) 中 ，86 第 1 次 出 现在 第 n 个 位 置 ” 等 等 ， 就 


Z 
td 
at | 


236 B13 循环 事件 。 更 新 理论 


有 意义 了 . 显然， 对 每 个 循环 事件 8 ， 有 如 下 定义 的 两 个 数列 : 
u, = PL & 出 现在 第 nn 次 试验}， 


= | ,4 ,***). , 
f, = P{8 第 1 次 出 现在 第 次 试验 ), T OOT (2. 1) 
为 方便 起 见 ， 定 义 
j = 0, w=l, (2. 2) 
并 引进 母 函 数 : 
F(s) = > fas ， UG) = Dust, (2. 3) 


注意 {wu} 不 是 概率 分 布 ， 事实 上 ， 在 现在 这 种 情况 下 ， Lu, =. 然而， 事件 
“86 第 1 次 出 现在 第 nn 次 试验 ”是 互 斥 的 ， 从 而 


f=FD= df, <1. (2. 4) 


显然 ，1 一 了 应 解释 为 ， 在 无 限 延 续 的 试验 序列 中 已 不 出 现 的 概率 如 果 f=1, KR 
可 以 引进 具有 下 述 分 布 的 随机 变量 T: 
PT =n) = fi. (2.5) 
其 至 当 A 一 1 时 ， 我 们 也 用 同样 的 符号 ， 因 此 开 是 一 个 不 规范 的 或 有 缺 久 的 随机 
变量 ， 它 有 1 一 厂 的 概率 不 取 数 字 值 (为 了 我 们 的 目的 ， 赋 工 以 符号 cc， 显然 ， 这 
不 需要 什么 新 规则 . ) 
8 的 等 待 时 间 ， 即 8 第 1 次 出 现时 所 需要 的 试验 次 数 A E 出 现 的 那 一 次 试验 ) 
居 一 个 具有 分 布 《2 5) 的 随机 实生 天 和 全 
…) 的 样本 空间 上 . 
出 循环 事件 的 定义 可 知 ，8 第 1 次 出 现在 第 个 试验 而 第 2 次 出 现在 第 次 试验 
的 概率 为 ff. 因此 8 第 2 次 出 现在 第 nn 次 试验 的 概率 fe 等 于 
LP =fhfathfhatt hah. (2. 6) 
上 式 右 端 是 {f,} 与 它 自己 的 卷 积 ， 因 此 {名} 是 两 个 独立 随机 变量 之 和 的 分 布 ， 其 中 
每 个 随机 变量 的 分 布 都 是 (2. 5)， 更 一 般 地 ， 如 果 8 第 次 出 现在 第 ”次 试验 的 概率 
FAS? 表示 ， 则 
fre = ff th D eee t+ ff. (2.7) 
这 个 简单 的 事实 ， 可 以 用 下 列 定理 表述 . 
定理 Af? 是 6 第 r 次 出 现在 第 n 次 试验 的 概率 ， 则 {f } 是 个 相互 独立 的 具 
有 公共 分 布 (2. 5) 的 随机 变量 To TF 


TP =T, +T, +++ T, (2. 8) 
pm. ROSH, HHO r (frst BK FO). 
特别 地 ， 由 此 推出 : 
SFo = FO) = f", (2.9) 


用 语言 来 表示 ，8 至 少 出 现 -次 的 概率 为 广 〈 这 是 早已 料 到 的 事实 )， 现 在 我 们 引进 
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定义 2 称 循环 事件 6 是 常 返 的 ， 如 果 二 1; 若 过 1， 则 称 6 是 暂 留 的 . 

对 于 暂 留 的 8 ，& 至 少 出 现 次 的 概率 f° 趋 于 0， 而 对 常 返 的 86， 此 概率 永远 是 
1. 用 语言 来 说 ， 常 返 的 8 概率 为 1 发 生 无 穷 多 次 ， 而 暂 留 的 8 只 能 发 生 有 限 次 . (此 
陈述 不 仅 是 描述 性 的 ， 如 果 在 无 穷 序列 E, E, ,的 样本 空闲 中 考虑 问题 ， 还 是 完全 
正确 的 命题 . ) 

我 们 还 要 一 个 定义 ， 在 伯 努 利 试验 序列 中 ， 一 次 返回 平衡 [第 1 节 例 (a)」 只 能 
在 偶数 次 试验 发 生 . EF, foni Sun =0, BRAM PC AUCOBA s RIA 
级 还 不 如 视 为 ? 的 震级 数 ， 类 似 地 ， 在 第 LPA oO 中 ， 如 果 是 一 个 整数 ， 只 有 
“nde atl) 的 倍数 ，8 才能 在 第 nn 次 试验 出 现 ， 我 们 把 这 种 情况 称 为 8 是 周期 
的 ， 本 质 上 ， 周 期 的 循环 事件 与 非 周 期 的 循环 事件 只 是 符号 上 的 差异 ， 但是， 每 个 
定理 都 要 求 特 别 注意 周期 的 这 一 例外 情况 . 换 旬 话说， 周期 的 循环 事件 有 许多 无 法 
弥补 的 麻烦 的 性 质 . 

定义 3 称 循环 事件 8 是 周期 的 ， 如 果 存 在 人 >>1， 使 得 5 只 能 在 第 1，24，3A… 
次 试验 才 可 能 出 现 ( 即 是 : 当 n 不 能 被 4 整除 时 ，u, 二 0)， 有 具有 上 述 性 质 的 最 大 整数 
A， 称 为 6 的 周期 ， 

BE, REE: 在 无 穷 序列 E, E ,… 的 样本 空间 中 ，8 第 > 一 1 次 出 现 到 第 
次 出 现 之 间 的 试验 次 数 是 一 个 有 定义 的 随机 恋 量 〈 可 能 是 有 缺 灰 的 随机 变量 )， 它 其 
有 T, 的 概率 分 布 ， 换 名 话说， 随机 变量 T 确实 代表 8 的 接连 两 次 出 现 之 间 等 待 时 间 
(循环 时 间 )， 为 了 不 超出 本 书 的 样本 空间 的 范围 ， 我 们 曾 分 析 地 定义 过 T,， 但 是 ， 
仍 希 望 在 其 直观 解释 中 展现 出 它 的 概率 背景 ， 利用 循环 事件 的 概念 ， 可 以 把 一 类 比 
较 一 般 的 随机 变量 化 为 独立 随机 变量 之 和 . 反之， 任 一 分 布 1fn),n 王 1,2,"… 可 以 用 
来 定义 一 个 循环 事件 .我 们 用 下 述 例 子 来 证 明 这 一 论断 : 

例 自我 更 新 体 ， 考 虑 一 个 电灯 泡 ， 或 一 段 保险 丝 ， 或 任意 一 种 寿命 有 限 的 零 
件 ， 当 第 一 个 用 坏 时 ， 马 上 换 上 同一 种 类 型 的 第 二 个 零件 ; 第 二 个 坏 了 时 ， 第 三 个 
又 立刻 换 上 ; 等 等 ， 我 们 假定 零件 的 寿命 是 只 取 某 一 时 间 单 位 (一 年 、 一 天 或 一 
HO 的 整数 倍 的 随机 变量 ， 于 是 ， 每 一 时 间 单 位 可 视 为 一 次 试验 ， 其 结果 可 能 是 
“和 更换” 或 “不 更 换 ”， 可 以 把 接连 的 更 换 看 作 是 循环 事件 ， 如 果 一 个 新 零件 恰好 能 
用 ?年 的 概率 为 上， 则 { 请) 为 循环 时 间 的 分 布 ， 如 果 零 件 的 寿命 必然 是 有 限 的 ， 则 
5 f/f, 一 1， 此 时 循环 事件 是 常 返 的 ， 通 常 ， 事 先 能 断定 零件 的 寿命 不 能 超过 某 个 值 
m， 此 时 ， 母 函数 政 (3) 是 一 个 次 数 不 超 过 m 的 多 项 式 ， 在 应 用 中 ， 我 们 希望 求 出 ; 
在 时 刻 n 要 换 新 零件 的 概率 u,， 它 可 由 方程 式 (3.1) 算出 ， 此 处 ,我 们 得 到 一 
类 由 任意 分 布 {f,} 所 定义 的 循环 事件 .f/f 过 1 的 情形 并 不 排除 ， 此 时 1 一 了 上 可 以 解释 
为 零件 永 不 坏 的 概率 . > 


1. 第 一 版 不 用 此 术语 ， 但 现在 这 一 术语 用 到 马尔 可 夫 链 中 去 于 好 些 . 
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13.3 基本 关系 


沿用 (2.2) 一 (2.4) 中 的 记号 ， 我 们 将 研究 {f) 与 {4} 之 间 的 关系 .6 在 第 v 次 
试验 中 第 1 次 出 现 而 且 又 在 第 n 次 试验 中 第 2 次 出 现 的 概率 为 fa, $6 在 第 nn 次 试验 
中 第 1 次 出 现 的 概率 为 f= .Auso， 因 为 这 些 事件 是 互 斥 的 ， 所 以 

u, = fiu, + funo Feet fnrtos (n=l). (3.1) 

容易 发 现 ， 上 式 右边 是 卷 积 {ff;) duw HERRA FOUG); 上 式 左边 是 缺 
uo 这 一 项 的 数列 {& ) ， 所 以 其 母 图 数 为 US) 一 1， 于 是 由 (3.1) A: U(s) 一 1 二 
FS)U(C 7， 所 以 ， 我 们 证 明了 下 述 定 理 ， 

定理 1 (us Sf, Oe BRA PIAA: 


— l 
U(s) = T= Fis)" (3. 2) 


注意 ; 当 | s | <1. 3.2) 的 右边 可 以 展 成 收敛 的 几何 级 数 盖 FCs)。 天 (Cs) 中 
对 应 于 yw 的 系数 为 Fo2 ， 它 是 8 在 第 ) 次 试验 中 第 > 次 出 现 的 概率 . 〈3. 2) 等 价 于 : 
u, = fP LSP fee, (3. 3) 
此 式 说 明 下 述 明显 的 事实 : 如 果 8 在 第 ?次 试验 出 现 ， 则 它 在 前 面 出 现 本 0， 1 2 …， 
1 一 1 次 ， (RR rv on 时 Of? =0. ) 
定理 2 8 为 暂 留 的 充分 必要 条 件 定 : 


u= Su | (3.4) 
为 有 限 数 ， 当 此 条 件 成 立时 ，8 迟早 总 会 出 现 的 概率 f 为 
f= — L (3.5) 


注意 ; 我 们 可 以 把 u 解释 为 一 个 随机 变量 的 期 望 ， 当 8 在 第 7 次 试验 中 出 现时 
的 期 望 值 ， 所 以 ，u 一 1 可 以 解释 为 无 穷 多 次 试验 中 8 出 现 的 次 数 的 期 望 值 . 
证 ”由 于 系数 uw 是 非 负 的 ， 故 当 s>1 时 ，U(s) 单 调 增加 ， 因 此 ， 对 每 个 N 都 有 : 
> Un <— limU (s) < 3 U, = u. 


n= 0 


因为 f<1 时 ， Us) (1 fy". 而 当 二 1 HF, UCs) 一 ce 定理 得 证 . > 
TB A SE EA EY. BAT) HY SR 


1. 特殊 情况 容易 证 明 (见习 题 1) 而 且 早 为 人 知 ， 大 量 的 论文 都 致力 于 改善 条 件 ， 但 一 般 部 认为 有 的 条 
件 是 必需 的 ， 定 理 3 的 最 -- 般 的 情形 的 证 明 见 [84]， 本 书 第 一 版 出 版 后 ， 钟 开 莱 发 现 ， 定 理 3 可 以 从 
科 尔 葛 臣 罗 夫 关于 马尔 可 夫 链 的 渐 近 性 质 的 定理 推出 来 ， 许 多 数学 家 对 各 种 不 同 ， 概 率 分 布 类 来 对 比 
定理 作 各 种 形式 的 推广 ， 这 些 研究 对 近代 概率 论 提 供 了 许多 有 效 的 研究 方法 .最 后 ， 得 到 了 类 似 定理 
3 的 结果 对 任意 的 概率 分 布 都 成 立 ， 一 个 初等 的 但 并 不 简单 ) 的 证 明 可 参见 第 二 卷 第 11. 9 1. 
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多 大 帮助 ， 所 以 我 们 把 其 证 明 放 在 本 章 的 最 后 . 
定理 3 设 6 是 常 返 的 非 周 期 的 ， 且 令 u Mm T, OH, Bp 
Æ 
p= Lif =F O) (3. 6) 
(u 可 能 为 ceo)， 则 当 >coe 时 有 
U, > 1) (3.7) 
(如 果 平 均 循环 时 间 为 ce， 则 uno). 

8 为 非 周 期 的 这 一 限制 很 容易 忽略 . 实际 上 ， 当 8 有 周期 1， 则 级 数 只 包含 y 的 
指数 寡 若 对 任意 整数 这 1， 上 述 情况 不 满足 ， 我 们 称 此 级 数 诚实 ， 定 理 3 可 表述 如 
F: 车 下 为 诚实 的 概率 母 函 数 ,，U 由 G.D REX, Wa, el/F O), ME EA J 
HA. WU FCs2 ) 为 诚实 的 概率 母 函 数 ， 则 Us) RRIF A/F). 

定理 4 如 果 6 是 常 返 的 且 具 有 周期 A 盖 1]， 则 

Un ~A/ps (3. 8) 
X k REIA PRN, u5 


13.4 fil f 


(a) 伯 努 利 试验 序列 中 的 成 功 ， 作 为 一 个 平凡 的 例子 ， 令 8 AAR AA SEA R 
A RD” W u= pnl ar. AeA 03.2) A: 


U(s) = =E, F(s) = Æ (A. 1) 
5 1—gqs 


在 此 特殊 情形 ， 定 理 2 确认 了 一 个 显然 的 事实 ， 姜 连 两 次 成 功 之 间 的 等 待 时 间 服从 
均值 为 1/p 的 几何 分 布 ， 

(b) 返 回 平衡 [第 1 节 例 (a)]， 如果 在 第 上 次 试验 正面 出 现 的 累积 次 数 等 于 反面 
出 现 的 黑 积 次 数 ， 则 必 有 上 = 二 2n 是 偶数 ， 此 时 ， 一 次 平衡 的 概率 等 二 


l 
U 2n 一 (42) pq” = T2 | to" (4.2) 
on 
因此 ， 由 第 2 章 8.7) 的 二 项 展 式 有 : 
l 
UCs) = 一 一 一 一 -一 (4.3) 
/1—4pqs” 
从 而 由 (3.2) 可 得 : 
F(s) = 1— vl—4pgs. (4.4) 


二 项 展 式 的 第 二 个 应 用 是 导出 fo 的 精确 表达 式 ( 当 pHi. wn Al fA 


达 式 在 第 3.2 节 和 第 3. 3 节 中 已 经 用 组 合 方法 导出 了 ， 和 母 函数 U 和 下 已 经 在 第 11.3 
节 中 用 另外 的 方法 导出 了 . 下面 将 会 看 到 ， 只 有 现在 的 方法 不 需要 其 他 技巧 . ) 
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当 s=1 Rf, (4.4) 中 的 平方 根 等 于 | p 一 g | ， 所 以 
f=1-l|p~ql. (4.5) 
因此 ， 返 回 平衡 是 一 个 周期 为 2 的 循环 事件 ， 当 pra, CAHE, m p=q 
时 它 是 常 返 的 ， 至 少 r 次 返回 平衡 的 概率 为 三 . 


当 p= 二 9q= 坟 时 ， 初 返 平衡 的 等 待 时 间 是 一 个 完好 的 随机 变量 ,然而 已 (1) 一 co， 


所 以 平均 循环 时 间 是 ce (这 也 可 以 从 定理 4 及 wu, 一 0 推出 . ) 平均 循环 时 间 是 ce 蕴涵 
T: 在 无 限制 地 扔 一 个 硬币 的 游戏 中 ， 随 机 起 伏 与 服从 正 态 分 布 的 融 乱 的 样 型 相差 
甚 远 ， 这 种 起 伏 的 较为 反常 的 但 却 是 真实 的 现象 ， 在 第 3 章 已 经 讨论 过 本. 
(c) 从 负 值 返 回 平衡 ， 在 第 1 节 例 (b) 中 ,返回 平衡 时 ， 限 制 了 其 前 面 的 部 分 和 
S; 都 不 能 为 正 的 .这 种 循环 事件 的 循环 时 间 的 分 布 由 下 式 所 定义 : 
fin= P{Sy = 05S; OS <0) (4. 6) 
当然 ，f5_1 一 0， 似乎 不 大 可 能 找到 直接 导出 此 概率 的 推理 ,但 是 却 可 从 上 面 的 例子 推 
出 ， 确 实 如 此 ， 在 满足 (4. 6 中 的 条 件 的 样本 (X;,，…,X,) 中 ， 均 含 n 个 正 的 入 个 
负 的 ， 所 以 ， 它 与 (一 六 ，…, 一 Xz ) 的 概率 是 一 样 的 ， 因 为 初 返 平衡 发 生 时 ， 它 必须 经 


过 正 的 或 经 过 负 的 ， 而 且 两 种 情形 也 具有 相同 的 概率 ， 所 以 fas fo UAL HR 
返回 平衡 的 分 布 ， 它 在 上 一 个 例子 中 已 经 找 出 ， 因 此 ， 我 们 的 循环 时 间 的 母 函 数 为 ， 


Fo =- V1—4pgs’, (4.7) 
从 而 
E 2 1— /1—4pgqs* 
U (s) = 一 一 一 一 , (4.8) 
? 1+ /1—4pqs° 2 pqs" 


HREM, CRMEREMMRNS—s | 2 一 4 | ， 


Cd) 阶梯 随机 变量 ， 只 有 当 & 王 22 十 1 是 奇数 时 ， 第 一 个 正 的 部 分 和 才能 出 现在 第 
k 次 试验 ， 其 对 应 的 概率 记 为 ， 
岂 = PLS, 一 0,…,，S， 一 0,9: 0 = 1}. (4. 9) 
Aeg BAS 1 节 例 dD 中 的 循环 事件 的 概率 分 布 ， 因 为 〈4.9) 中 的 条 件 要 求 
XxX, ,一 十 1， 所 以 前 一 个 例子 中 的 循环 事件 出 现在 第 2n 次 试验 ， 由 此 推出 Poni = 
pp。，uz. 因此 ， 用 明显 的 符号 ， 有 
pls) = pU (s) = le. (4. 10) 
这 是 已 经 在 第 11 (3.6) 中 求 出 的 “ 初 过 时 ”的 母 函数 ， 应 用 第 2 章 (8.7) 的 二 
项 展 式 ， 由 (4.10) 可 推出 gn 1 的 精确 表达 式 ， 此 表达 式 与 第 3.7 节 定 理 2 中 用 组 
合 方法 找 出 的 表达 式 是 一 样 的 . 
(e) 盖 革 计 数 器 ， 在 第 1 节 例 (g) 中 ， 如 果 在 时 刻 1 没有 记录 ， 它 仍然 是 开局 
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的 ， 否 则 它 锁 住 ， 而 且 在 时 刻 r 十 1 没有 到 来 时 ， 它 又 开局 ， 如 果 在 时 刻 r 十 1 有 质点 


出 现 而 在 2r 十 1 没有 质点 出 现 ， 则 计数 器 在 时 刻 2r 十 1 开局 ee 因此， 循环 时 间 
HIRE RRO 
gs + gps™ + gp? 8) oe = EB 2 (4.11) 
一 


(FEL YB 7—9.) 

(全 最 简单 的 排队 问题 [第 工 节 例 Ch]. 这 里 ， 当 时 刻 1 无 顾客 到 来 时 ， 服 务 设施 
空闲 着 ， 如 果 到 来 一 个 顾客 ， 就 会 产生 一 个 所 谓 的 “ 忙 期 *， 此 忙 期 要 持续 到 服务 设施 
第 1 次 空闲 时 才 终 止 ， 忙 期 的 母 函 数 已 经 在 第 12.5 PH Co) 中 用 分 支 过 程 的 方法 推 
出 过 ， 在 现在 的 情形 ， 循 环 时 间 的 母 函 数 为 gs 十 psp(s)， 这 与 第 12 章 (5.7) 一 样 . 

(g) 扔 多 个 硬币 游戏 中 的 平局 ， 我 们 用 一 个 简单 的 例子 来 说 明 : Toma KE aL 
的 确切 知识 ， 就 可 推出 一 些 确切 的 结论 的 可 能 性 . 令 ra 是 任意 一 个 整数 ， 并 考虑 
一 个 同时 独立 地 扔 r 个 硬币 的 试验 序列 ， 令 8&6 为 这 样 一 个 循环 事件 ， 全 部 -个 硬币 都 
处 于 同一 个 位 相 ( 即 是 ~ 个 硬币 扔 出 的 累积 的 正面 次 数 都 相同 )， 此 事件 出 现在 第 n 


次 试验 的 概率 为 ， 
w= D + (7) ++ (") | (4. 12) 
右边 诸 项 是 p= 二 的 二 项 分 布 ， 由 正 态 帝 近 易 见 ， 对 每 个 固定 的 r-， 当 woo 时 有 
~ (2) Ser (4. 13) 
Un x e 。 
( 求 和 号 中 的 j BORM — tn Bln 的 一 切 整 数 .》 由 积分 的 定义 有 
2 /5 eo’ +] oe dz = V2r (4. 14) 
因此 ， 
1 2 去 (r 一 1) 
u, ~ laa) | (4. 15) 


x2 Tr <3 De, 发 散 ， 但 此 级 数 在 r24 时 收敛 ， 由 此 推出 : r 二 3 时 6 是 常 
返 的 ， 而 了 之 4 时 是 暂 留 的 .因为 当 r 迄 3 时， 一 0， 所 以 平均 循环 时 间 是 cp. Cit 
较 习 题 2 和 3. ) | > 
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我 们 现在 引进 一 个 比 循环 事件 稍为 广 一 点 概念 ， 除 了 术语 和 关于 记录 的 基本 方 
程 以 外 ， 不 需要 作 什 么 特别 的 说 骨 . 

也 许 ， 关 于 迟延 的 循环 事件 的 最 好 的 非 正式 的 描述 是 在 它们 对 应 的 试验 序列 
中 ， 我 们 “遗失 了 开头 而 在 中 间 开 始 ” 到 8 第 1 次 出 现时 的 等 待 时 间 服 从 分 布 16,)， 
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它 洒 8 下 一 次 出 现 的 等 待 时 间 的 分 布 { 户 } 不 一 样 ， 所 有 的 理论 ， 均 无 需 改 变 就 可 应 
H. GREY PAR: 8 第 1 次 出 现 以 后 的 试验 的 样本 空间 与 起 始 的 样本 空间 不 同 ， 而 
6 每 次 出 现 以 后 的 样本 空间 完全 是 重复 的 . 

情况 很 简单 .我 们 按 常规 而 行 ， 并 约定 当 说 及 一 个 迟延 循环 事件 8 HR, HAG 
环 事件 的 定义 只 是 不 考虑 直到 8 第 1 次 出 现时 那些 试验 而 已 ， 这 样 来 理解 迟延 循环 事 
件 ，8 第 1 次 出 现 的 等 待 时 间 是 一 个 随机 变量 ， 它 与 其 后 诸 循环 时 间 相 互 独立 ， 但 其 
分 布 (5,) 可 能 与 其 他 诸 循 环 时 间 的 公共 分 布 {f,} 不 一 样 . 

令 芭 是 8 在 第 ?次 试验 出 现 的 概率 . 为 了 推导 vw 的 表达 式 ， 我 们 进行 如 下 推理 . 
REER k <n 次 试验 出 现 ， 关 于 其 后 的 子 试验 序列 ，86 就 变 成 了 一 个 通常 的 循环 
事件 ， 所 以 重新 出 现在 第 n 次 试验 的 (条件 ) 概率 为 ue AA, E 在 第 次 试验 出 
现 有 两 种 可 能 ， 或 者 它 在 第 n 次 试验 第 1 次 出 现 ; 或 者 它 第 1 次 出 现在 第 & <n 次 试 
验 ， 把 所 有 的 概率 加 起 来 ， 得 到 ， 

uU, = b, + b,a tu F botto 二 二 Ow, i bou,. (5.1) 

于 是 我 们 得 到 了 vw, 的 精确 表达 式 . [ 另 一 个 证 明 见 第 10 节 例 (a). 」 关系 (5. 1) 

可 以 用 卷 积 方程 号 得 更 有 索 竣 一 些 
{Un} = (bn) * {uy}. (5. 2) 
这 蕴涵 了 对 应 的 母 函数 满 足下 列 的 恒等式 ; 


Vs) =B6s)U(s) = BY? 


1— Fs)’ 

例 (Ca) 在 第 4 节 例 (a) 一 例 (d) 所 考虑 的 伯 努 利 试 验 序列 中 ， 事 件 $,=1 是 一 个 
迟延 循环 事件 ， 其 第 1 次 出 现 的 等 每 时 间 的 母 清 数 是 如 (4. 10) 所 定义 的 中 接连 两 
次 出 现 {1S,=1} 之 间 的 循环 时 间 的 母 函 数 是 下， 它 是 返回 平衡 的 母 图 数 [ 见 (4.4)]. 
因此 ， 在 现在 的 情形 ，Y 王 中/1 一 六 )， > 

容易 证 明 : vn 的 渐 近 性 质 本 质 上 与 wx, 的 渐 近 性 质 一样 ， 为 了 避免 一 些 不 足 道 的 
He, BES 是 非 周期 的 :， 由 第 3 TPA, EMRE, un 趋 于 有 限 的 极限 ， 而 且 
Dun SOOM) TAD BRE: bE AA. 

定理 1 +o d U, Ws 则 

Un, bw HP b= Ub =B). (5. 4) 
te KR Du, =uxcco, M 


(5. 3) 


iv, = bu. (5. 5) 
特别 地 ， 若 8 是 常 返 的 ， 则 un. 
证 S r= bei Torn T. AAu<l, BR, HE (5. 1) 得 知 : 4 n >k 时 
by Uy F °t F Drt ne S Un S bo Un F tte F burns T Te. (5.6) 
选 上 充分 大 以 使 r,;<e， 对 充分 大 的 n，(5.6) 中 最 左边 的 和 数 大 于 bw 一 2e， 而 最 右 


1. 周期 循环 事件 在 定理 10. 2 中 讨论 .定理 1 的 另 一 证 明 见 《第 10 节 例 (ad). 
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边 的 和 数 小 于 bw 十 2e， 因 此 (5.4) 成立， 结论 65.3) 可 由 把 (5.1) 对 一 切 n 求 和 
而 得 ， 也 可 在 65.3) PS s=1 而 得 . > 

下 面 转 而 研究 一 个 广 为 应 用 的 一 般 的 极限 定理 ， 假 定 对 某 一 特定 的 系统 有 可 数 
多 个 可 能 的 状态 E , 忆 ,…, 而 且 从 一 个 状态 转移 到 男 一 个 状态 依赖 于 一 个 某 种 类 型 的 
随机 机 构 ， 例 如 ， 在 简单 的 排队 过 程 第 1 TA Ch) 中 ， 如 困 有 名 个 顾客 在 队列 中 
(包括 正在 接受 服务 的 那个 顾客 )， 则 说 此 系统 处 于 状态 &， 一 个 包含 17 个 服务 的 问 
题 可 能 要 求 18 个 数 去 区 别 系统 的 状态 ， 人 但是， 一切 可 能 的 状态 可 以 在 序列 Ei ,Es，… 
中 标 序 ， 我 们 不 需要 考虑 如 何 做 得 最 好 ， 因 为 下 面 的 定理 并 不 导出 一 种 计算 概率 的 
实用 方法 ， 它 是 一 个 纯 存 在 性 定理 ， 它 证 明了 对 实际 中 经 常 遇 到 的 情形 ， 稳 定 状 态 
REGEN. 这 具有 抽象 意义 ， 也 有 实际 价值 ， 因 为 按 常 规 ， 一 个 稳定 状 在 的 数学 
分 析 远 比 研 究 依 时 过 程 简单 . 

假定 对 n= 二 1,2,…, 对 每 一 个 nn 元 组 (x,…,r,)， 系 统 在 时 刻 0,1,…,n 一 1 处 于 
RAS (EE) 都 有 完全 确定 的 概率 .我们 不 再 引进 关于 这 些 事 件 相互 依 赖 的 假 
设 ， 也 不 引进 关于 一 个 状态 转移 到 另 一 个 状态 的 概率 的 假设 .为 简单 起 见 ， 我 们 仅 
仅 考 虑 在 时 刻 n RARTRAE, 的 概率 pO. (定理 推广 到 二 元 组 ， 三 元 组 等 等 都 十 
很 容易 的 . ) 最 苛刻 的 假设 是 ， 存在 一 个 联系 我 们 的 过 程 的 循环 事件 8 ， 例 如 ， 在 排 
队 过 程 第 1 节 例 Ch) h, E 就 是 这 样 一 个 循环 事件 ， 在 这 种 情况 下 ， 恕 采 8 ee 
的 ， 则 存在 一 个 正 概 率 使 队列 不 终结 ， 这 蕴涵 了 : 我 们 迟早 要 遇 到 一 个 没有 结尾 的 
队列 ， 也 就 是 说 ， 队 列 无 穷 地 增加 其 长 度 . 这 是 一 个 某 种 类 型 的 极限 定理 ， 它 说 明 
在 实际 中 这 种 服务 是 不 可 能 的 ， 这 个 例子 ， 将 说 明 “8 是 常 返 的 ”这 一 条 件 所 起 的 作 
用 (引进 非 周期 性 是 为 了 避免 一 些 不 足 着 的 情形 . ) 

定理 2 假定 在 我 们 的 过 程 中 ， 有 一 个 非 周期 的 常 返 的 〈 可 能 是 迟延 的 ) 循环 事 
件 8 ， 则 

p? > p? (5.7) 
而 且 当 平均 循环 时 间 pu 有限 时， 有 
ap” = (5. 8) 

Gm, p?=0. 

证 ”对 任何 时 刻 而 言 ， 只 有 8 一 出 现 ， 则 过 程 重新 开始 . 因此， 在 8 于 某 一 时 
刻 出 现 的 条 件 下 ，E, 在 此 后 ?个 时 间 单 位 却 又 在 8 下 一 次 出 现 以 前 发 生 的 条 件 概 率 
et 是 完全 确定 的 ， 对 于 迟延 循环 事件 而 言 ， 我 们 还 要 求 引进 概率 yo CHE & 
后 在 时 刻 7 却 又 在 8 第 1 次 出 现 以 前 的 概率 . 〈 显 然 ， 对 非 迟 延 的 循环 事件 8 而 言 ， 
Yn = By.) 

现存 把 “EE, 在 时 刻 n 发 生 ” 的 方法 根据 时 刻 n 以 前 5 最 后 一 次 出 现 的 情况 来 进 
行 分 类 ， 第 一 类 ，8 未 出 现 ， 相 应 的 概率 为 Y? ; 第 二 类 ， 存 在 ES” 8 在 时 刻 k h 
现 过 但 在 时 刻 k 到 之 间 示 出现， 相应 的 概率 为 vg 吕 ,， 把 这 些 互 斥 的 事件 的 概率 加 
起 来 得 到 
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PP =H + giv + grow +o + gy? O. (5.9) 
(此 处 ， 我 们 沿用 定理 1 ARS. PREAH, uy =0, XE FARI EM SF, 
Up = ts NY” =g.) 
除了 右边 出 现 Y? Wb, 65.9) 与 (5. 1) 是 类 似 的 ， 显 然 ， 此 数 小 于 8 在 时 刻 n 
以 前 不 出 现 的 概率 ， 又 因为 8 是 常 返 的 ， 所 以 当 ce 时 轧 一 0， 对 于 其 余 的 项 ， 我 
们 可 以 应 用 定理 1， 只 不 过 把 符号 w 用 wv th. Ae 代 而 已 ， 因为 8 是 常 返 的 ， 
所 以 ww 一 Ap ， 由 此 推出 : 


p? > wu) >) gi”. (5. 10) 
b= 


这 就 证 明了 极限 05.7) 的 存在 性 、 为 了 证 明 它 们 加 起 来 为 1， 注意 到 在 每 一 个 时 刻 ， 
系统 总 是 处 于 某 一 个 状态 ， 所 以 


| ST gi = En (5.11) 
是 循环 时 间 大 于 等 于 ”的 概率 ， 即 是 
Bn 一 fat fm te 
因此 ， 由 第 11 音 (1.8) 
de? = ig =1 (5.12) 
> 


[第 10 节 例 Cb) 中 的 极限 定理 是 现在 的 定理 的 特例 . ] 


13.6 8 出 现 的 次 数 


到 现在 为 止 ， 我 们 用 接连 两 次 出 现 的 等 待 时 间 研 究 了 循环 事件 &. 下 面 的 处 理 
常常 会 更 好 : 给 定 试验 次 数 n， 取 前 n 次 试验 8 出现 的 次 数 N, 作为 基本 的 随机 变 
， 量 ， 下 面 将 研究 n 充分 大 时 ，NN, 的 分 布 的 渐 近 性 质 . 为 简单 起 见 ， 假 定 8 征 非 过 
延 的 . 

如 像 (2.8) 中 一 样 ， 令 To” 为 8 第 > 次 出 现时 所 需 的 试验 次 数 〈 仿 第 ~ 次 出 现 那 
mike). TORN, 的 概率 分 布 有 下 列 关 系 : 

PIN, >r} = PIT?” <n}. (6. 1) 

我 们 从 下 面 的 简单 情形 开始 :8 是 常 返 的 ， 其 循环 时 间 的 分 布 {f,) 共 有 有 限 的 均 
值 x 和 方差 s*， 因 为 T? 是 r 个 相互 独立 的 随机 变量 的 和 ， 第 11. 1 节 的 中 心 极限 征 
理 断 言 : 对 每 个 固定 的 zx， 当 一 co 时 


T” 一 7 
P| <r> NT) (6. 2) 
Oo 


ab, RCo) FLIER TR. S n> 一 co 满足 下 列 条 件 : 
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m — TH 
or 
则 由 (6.1) 和 (6.2) 推出 
PIN, 之 r} — R(x). (6. 4) 


为 了 把 这 一 关系 写成 更 熟悉 的 形式 ， 引 进 人 简化 的 随机 变量 ，: 


e — p |E 
N; = N, = a] 4. (6.5) 


不 等 式 Nr 与 下 列 不 等 式 是 等 价 的 : 
N; 之 Aj n o T 七 . (6. 6) 


把 (6.3) BLL r, BR n/r>w, PRU (6.6) 的 右边 趋 于 一 x， 因 为 和 (一 zx) 二 1 一 
Near), PRY 

PIN? >— 2} >Re) 或 PIN? <x} >1—-R(a), (6. 7) 
因此 我 们 证 明了 下 述 定 理 : 

定理 正 态 通 近 ， 如 果 循 环 事件 6 是 常 返 的 ， 而且 其 循环 时 间 上 有 具有 有 限 的 均值 jz 
与 方差 or， 则 6 在 第 r 次 出 现时 所 需 的 试验 次 数 T" 与 前 n 次 试验 6 HAKAN, 都 
渐 近 地 服从 正 态 分 布 ， 如 (6.2) 和 (6.7) 所 示 . 

注意 : (6.7) 是 关于 相依 随机 变量 序列 (N, 的 中 心 极 限定 理 . 它 的 用 处 将 会 
在 下 一 节 关 于 连贯 理论 的 应 用 中 展现 出 来 . 

关系 式 (6.7) 使 下 述 佑 讨 是 合理 的 : 

E(N,) ~n/ps, Var(N,) 一 no fp. (6. 8) 
此 处 符号 一 表示 两 边 之 比 趋 于 1， 为 证 (6.8), HEEN, 是 nn 个 (相依 的 ) 随机 变量 
Y, 之 和 ， 而 每 个 Y, 当 & 在 第 次 试验 出 现时 为 1 否则 为 0， 因 此 EY D Su, iti 
ECNO = wm tw +H’ t un. (6.9) 
KA uul, RAMT (6.8) 的 第 一 个 关系 式 . 类 似 的 推理 可 证 〈6.8) 的 第 二 个 
关系 式 ，( 见 习题 20. ) 

不 幸 的 是 ,许多 随机 过 程 和 一 些 应 用 中 出 现 的 循环 时 间 的 期 望都 是 无 穷 大 ， 在 
这 种 情况 下 ， 正 态 允 近 要 代 之 以 具有 完全 不 同 的 性 质 的 更 一 般 的 极限 定理 ， 而 随 
机 起 伏 显 示 出 想像 不 到 的 特性 ， 例 如 ， 人 们 直观 地 想像 E(N,) 随 的 增加 而 线性 地 
增加 ,“ 因 为 试验 次 数 变 为 两 倍 时 8 出 现 的 次 数 平均 来 说 也 是 原来 的 次 数 的 两 倍 . ” 事 
实 并 不 如 此 ， 如 果 平 均 循 环 时 间 是 无 穷 大 的 话 ， 那 么 怒 一 0， 从 而 由 《6.9) A, 
ECN,)/n->0， 这 意味 着 在 长 连贯 中 ，8 的 出 现 变 得 非常 稀少 ， 只 有 某 些 循环 时 间 是 
不 可 思议 的 长 ，8 才 可 能 出 现 ， 下 述 二 例 ， 将 要 说 明 此 等 现象 是 容易 的 . 


例 (a) 令 8 为 扔 硬币 的 游戏 中 , [第 4 节 例 Cb). ， 其 中 p=) “返回 平衡 ”这 一 
事件 ， 则 Urn ~ 1/ Sans 而 且 (6.9) ia UE FAR AP (xx) , mA wh TS E(N,,) 一 
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2 Jair. 因此 ， 到 时 刻 ” 的 平均 循环 时 间 依 \ 太 的 速度 增加 ， 而 此 结果 的 一 些 严酷 的 
推论 在 第 3 章 中 花 了 很 长 的 篇 幅 加 以 讨论 . 
(b) 返 回 第 4 节 例 〈g) ， 考 虑 重复 掷 > 一 3 个 硬币 ， 令 8 表示 3 个 硬币 都 处 于 相同 
的 位 相 ， 我 们 曾经 证 明 ，8 是 常 返 的 循环 事件 ， 而 且 w 一 万- ， 因此， 粗略 地 说 ， 
* 17 
ECN,) 增 加 的 速度 与 log n 差不多 ， 所 以 到 时 刻 n 的 平均 循环 时 间 与 4/log n 的 大 小 的 
阶 差不多 . > 


13.7 在 成 功 连贯 中 的 应 用 


下 面 将 用 > 表示 一 个 固定 的 正 整 数 ，8 表 示 伯 努 利 试验 序列 中 长 为 的 成 功 连贯 
的 出 现 ， 第 1 节 例 (Ce) 中 所 定义 的 连贯 的 长 度 是 重要 的 ， 否 则 连贯 就 不 是 循环 事件 
了 了， 并且 计 算 变 得 很 复杂 了 ， 如 在 (2.1) 和 (2.2)〉 中 一 样 ，u 是 56 在 第 n 次 试验 中 
HIMBA, mf, 是 第 1 个 长 为 + 的 连贯 出 现在 第 n 次 试验 的 概率 . 

第 n,n 一 1,n 一 2,…,n 一 r 十 1] 这 r 次 试验 都 出 现成 功 的 概率 是 p". 在 这 种 情况 下 ， 
8 在 第 n 一 kk 二 0,1,…,7r 一 1) 次 试验 出 现 而 且 其 他 的 次 试验 出 现 k 次 成 功 的 概率 是 
umb. AAA -个 事件 :是 互 斥 的 ， 所 以 有 下 述 循环 关系 


Un F Upi pte t+ uy p =p nr. (7.1) 
显然 
U 一 一 一 2 一 0，t =d. (7.2) 
HE (7.1) RPV s, AX n= 二 rr 十 1,r 十 2,… 求 和 得 到 其 左边 为 ; 
{DCG9) 一 1 十 ps 十 ps 十 十 ps ) (7. 3) 
而 其 右边 为 : p (5 十 十 …)， 此 二 级 数 都 是 几何 级 数 ， 故 有 
(U(s) —1} «= = PS (7. 4) 
l — ps l— s 
或 


_ l=stqp's™ - 
Us) prey (7.5) 


由 (3. 2) ， 可 得 循环 时 间 的 母 函 数 为 : 


F(s) = ps 1 — ps) _ p's’ 
l—stap’s™ l—-gUtpster tps) 
由 FE(L) 一 1 这 一 事实 可 知 :; 试验 序列 很 长 时 ， 任 意 长 的 连贯 出 现 的 次 数 可 以 越 
过 任意 上 界 ， 因 为 一 x'， 所 以 平均 循环 时 间 /可 以 由 《〈7.1) 式 直 接 得 到 ， 因 为 


(7.6) 


L 原著 在 此 处 是 “概率 ”， 因 并 无 “概率 是 互 斥 ”的 定义 ， 故 把 “概率 ”一 词 改 为 “事件 一 一 人 详 痢 注 
2. 古典 办 法 包含 在 推导 n 的 循环 关系 中 ， 但 其 方法 较 复 杂 ， 而 且 也 不 能 用 到 其 他 类 型 的 连贯 或 者 样 
型 SSFFSS 中 去 ， 而 我 们 在 此 处 却 可 以 不 加 改变 地 应 用 到 这 些 问 题 上 去 [参见 第 8 节 例 Co) I. 
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我 们 也 要 求知 道 方差 ， 这 最 好 去 计算 Fis) WSR. 
最 好 先 整理 (7.6) 的 分 母 再 微分 ， 经 过 简单 的 计算 ， 得 到 长 为 > 的 连贯 的 循环 
时 间 的 均值 与 方差 如 下 : 


u= lp 2.1 _értl pb 

gp" (gp” y gp” q“ ? 
由 前 一 节 的 定理 可 知 : 对 于 充分 大 的 n,n 次 试验 中 所 产生 的 长 为 r ARDAN, 
是 渐 近 正 态 分 布 的 ， 这 就 是 说 ， 对 任意 固定 的 a 二 8， 概 率 


于 二 gg, /让 二 NN;, 二 二 十 Be/ 三 (7. 8) 
p z p z 


趋 于 %(8) 一 和 (a)， 此 结果 首先 由 冯 。 米 泽 斯 所 证 明 ， 但 其 计算 很 长 ， 表 13-1 给 出 了 
几 个 循环 时 间 的 均值 . 


表 13-1 假定 每 秒 进行 一 次 试验 ， 成 功 连贯 的 平均 循环 时 间 


(7.7) 


vv vv vv vv 一 
连贯 的 长 度 p=0.6 p=0.5 (硬币 ) pe BF) 
r=5 30. 7 秒 . 1 分 2. 6 小 时 
10 6.9 分 34.1 分 28. 0 月 
15 1. 5 小 时 18. 2 小 时 18 098 年 
20 19 小 时 24. 3 天 140.7 百 万 年 


第 11. 4 PRE, IRE MERA. ADAM: (7. 6) 

的 第 二 个 表示 式 的 分 母 有 惟一 一 个 正 根 sr 对 于 每 个 满足 1s| 委 xz 的 实数 或 复数 s， 
总 有 

gat ps +H tp ts?) |<qrQ1tprtertp or )=1 (7.9) 

其 中 的 符号 只 有 当 左 边 所 有 项 均 具 有 相同 的 幅 角 〈 即 ;二 x)〉 时 才能 成 立 ， 故 zx 的 绝 

对 值 小 于 (7. 6) 式 中 的 分 母 的 其 他 的 根 的 绝对 值 ， 因 此 ， 可 对 s = 用 第 11 章 的 公 

A (4.5) 和 (4. 9)， A> U(s) = p's’ A ps), V Sls tgp. AA Vir) =0, 
所 以 


CCz 一 DG 一 zz)， 1 | 
fa (FI mo i (7. 10) 


在 nn 次 试验 中 没有 连贯 的 概率 为 q, 二 fri 十 frrz 十 fors 十 …， 把 《7.10)〉 中 的 几何 级 
数 求 和 得 ， 
_iv~p .i 
h GEIS roq x 
这 样 ， 我 们 就 找 出 了 和 次 试验 中 没有 长 为 的 成 功 连贯 的 概率 满足 〈7. 11) R. 
表 13- 2 说 明 ， 即 使 对 很 小 的 ma (7.1D 右边 的 逼近 都 是 非常 精确 的 ， 而 且 通 近 的 精 
度 随 2” 的 增加 而 迅速 改善 ， 这 就 说 明 母 函数 法 与 分 部 分 式 法 的 威力 ， 


(7. 11) 
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表 13- 2 具有 p 二 地 的 n 次 试验 中 没有 长 为 "二 2 的 成 功 连贯 的 概率 


n qn 的 确切 值 H (7.11) 所 得 之 值 误差 

2 0.75 0. 76631 0. 0163 

3 0. 625 0. 61996 0. 0080 

4 0. 500 0. 50156 0. 0016 

5 0. 40625 0. 40577 0. 0005 

数值 计算 ， 为 了 照顾 做 实际 工作 的 谈 者 的 需要 ， 籍 此 机 会 ， 介 绍 一 点 部 分 分 式 展 开 中 的 


数值 计算 ， 但 不 会 像 第 一 次 见 到 那样 详细 并 述 ， 然 而 其 误差 的 精确 估计 还 是 可 能 得 到 的 ， 
渐 近 展 式 (7.11 中 有 两 个 问题 ， 第 一 ， 那 r 一 1 个 被 忽略 了 的 根 的 贡献 必须 估计 ; 第 
二 ， 起 支配 作用 的 那个 根 x 必需 计算 . 
(7.6) 式 中 第 一 个 表示 式 说 明 ，F(s) 的 分 母 的 一 切 根 都 满足 方程 式 ， 
s=1+qp's™, (7,12) 
但 (7.12) 有 一 个 附加 的 不 相关 的 根 spl. AFEK ss f(O=l+ae'’s t EAR, ESD 
角 线 y=s 交 于 x hip. 而且 在 区 间 xz 和 pp '! 之 间 它 的 图 形 在 分 角 线 下 面 ， 老 好 有 (p= 
(r 十 1)q， 如 果 此 数 大 于 1， 则 f(s) 的 图 形 在 ;二 p， 由 下 面 穿越 分 角 线 ， 因 此 p >r AE 
起 见 ， 假 定 
(r+Dq> 1, (7.13) 
在 此 场合 ，x <p, MA4rc<s<p'N. fid<s. 由 此 推出 : HRE a [si <p? 
的 复数 ;s， 都 有 1 fO|<Sfsd<|s|, MARAI s BEAM se <l <r A. AA r 
按 绝 对 值 而 言 的 最 小 的 根 ， 所 以 
| s [> p 4 s 天 工时 ， (7. 14) 
微分 〈7. 12) 可 见 一 切 根 都 是 单 根 . 
每 一 个 根 对 o, 的 贡献 都 与 起 支配 作用 的 根 zx 在 〈7.11) 中 所 作 的 贡献 在 形式 上 是 一 样 
的 ， 因 此 , Æ (7.11) 中 被 略 去 的 那 r 一 1 项 都 有 下 列 形式 : 


A. = paol _ . d 
t  ,—-C(r+]) gsp 
我 们 要 找 出 右边 第 一 个 因子 的 上 界 . 为 此 ， 首 先 注意 ， 对 固定 的 > 请 >or, A 
pse” — 1 < ps +1 . 

13e — (r+ 1) mtrti 


对 应 极 小 值 而 x 对 应 极 大 值 ， 于 是 ， 由 (7.13) 和 (7.14) 得 : 


2 pi? 


(7. 15) 


(7. 16) 


2p™ 
A I< GH bp rip (7.17) 
由 此 推出 , Æ (7.11) 中， 忽略 那 异 于 xz 的 r 一 1 个 根 所 引起 的 误差 的 绝对 值 小 于 
Zr— Dp (7. 18) 


ra(l pp) 
用 逐次 通 近 法 ， Xo =l, ree = fare) 由 (7.12) 容易 算出 根 Xs 此 序列 会 单调 收敛 到 Ts 其 
中 每 一 项 都 是 x 的 下 界 ， 而 每 一 个 满足 sf O 的 :都 是 x WEAR. DH: 
二 1 十 gp 十 (r 十 1)(gp” 六 十 和 …. (7. 19) 
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“13.8 更 一 般 的 样 弄 


我 们 前 面 所 使 用 的 方法 可 以 用 到 更 一 般 的 问题 中 去 ， 这 些 问 题 以 前 曾经 考虑 过 ， 
它们 比 简单 连贯 更 难 一 些 . 

Gl (a) 各 种 类 型 的 连贯 ， 令 8 为 “或 者 一 个 长 为 + 的 成 功 连 贯 ， 或 者 一 个 长 为 p 
的 失败 连贯 [参看 第 1 节 例 (f)]”， 研 究 两 个 循环 事件 2 和 8& ， 此 处 8 代表 “长 为 ， 
的 成 功 连贯 "， & 代表 “长 为 "的 失败 连贯 >， 而 8 代表 “或 者 8 MH”. OTS, 
其 对 应 的 母 函 数 为 〈7. 5) ， 现 在 用 Ui Cs) 表示 之 .8 对 应 的 母 孙 数 用 Ui(s) 表 示 之 ， 
它 也 可 以 从 “〈7. 5) 式 得 到 ， 只 不 过 把 户 和 4 互相 交换 位 置 而 且 以 po 代 -而 已 .8 在 第 
n 次 试验 中 出 现 的 概率 u, 等 于 & 和 8& 的 相应 的 概率 的 和 ， 除 了 w= 二 1 这 一 点 以 外 . 
由 此 推出 : 


Uls) = U, Cs) 十 [Us) — 1. (8.1) 
8 MEP AY [a] A eR FCs BEE FOS) =1-U ls), 或 者 
Fís) = (1— pps’ A-—¢ 8s) +A—gq¢s? 1 — p's’) (8. 2) 


1—s+qp's™' + paes — p’g’s”® 
微分 之 可 得 平均 循环 时 间 如 下 : 
_d-poa-?¢_) 
u= op’ + pa? — prar (8. 3) 
当 o 一 ce 时 ， 此 表示 式 趋 于 (7.7) 式 给 出 的 成 功 连贯 的 平均 循环 时 间 . 

(b) 在 第 8. 1 节 中 ， 我 们 计算 过 一 个 长 为 r 的 成 功 连贯 出 现在 一 个 长 为 o 的 失败 
连贯 之 前 的 概率 zx。 如 例 (a) 定义 两 个 循环 事件 2 ME. Ox, NE 第 一 次 出 现在 
第 n 次 试验 而 此 前 未 出 现 & 的 概率 ; f, AE 第 一 次 出 现在 第 次 试验 (对 & 没有 任 
何 条 件 ) 的 概率 ， 类似 r MS, 分 别 定 义 y, 和 g,， 只 不 过 把 前 面 的 & 和 & 的 地 位 互 
换 而 已 . 

f, 的 母 函 数 由 〈7.6) 给 出 ， 再 把 p 和 9g 互 换 并 以 o 代 r 即 可 得 到 G(s)， 并 有 下 
列 循环 关系 : 

Xn = fa On fra F yefe Fo Tri fi) (8. 4) 
= g, — (21 Era F 28r F 0e F Erag). 
它们 都 是 卷 积 型 的 ， 因此 ， MPD AY BE RANA PUA 


X(s) = FC) —Y(s) FCs) Y€s) = GCs) — X(s)GCs). (8.5) 
由 此 二 线性 方程 式 可 得 : 
X(3) = F(s)(1 —G(s)) Ys) = G(s)(1 — F(s)) (8. 6) 


1—F(s)G(s) © 1— F(s)GCs) 7 
用 部 分 分 式 法 仍 可 得 到 x, My, 的 表示 式 ， 对 ;二 1， 我 们 有 XOS Xr, =r, RHE 


* 此 节 处 理 特殊 主题 ， 可 略 去 . 
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出 现在 8 之 前 的 概率 ， 当 ;二 1 时 (8. 6〉 中 第 一 式 的 右 方 的 分 子 和 分 母 都 为 0， 所 以 
计算 X(1) 得 用 洛 必 达 (L’Hospital) 法 则 ， 即 是 微分 分 子 和 分 母 : XDS (1)/(F 
(D+GQ)). A (7.7) KA FO)=A—- p)/qp 和 G'(1)= 二 (1 一 gq)/pq， 由 此 得 
到 第 8 (1.3) PAW XCD. 
(c) 考 虑 形 如 SSFFSS 的 样 型 所 定义 的 循环 事件 .重复 第 7 市 的 推理 ， 易 见 : 
pg = u, HP EUn ted Uns. (8.7) 


AKEH uu, AAFAA upt “十 p 十 p . 当 p=q= 3t}, 


4 二 70， 然 而 长 为 6 的 成 功 连贯 的 平均 循环 时 间 为 126， 这 表明 与 希望 不 一 样 ， 在 扎 
硬币 中 ， 戌 功 连贯 与 其 他 具有 相同 长 度 的 其 他 连贯 有 着 本 质 的 不 同 . > 


13.9 几何 等 待 时 间 的 记忆 缺损 


等 待 时 间 的 几何 分 布 ， 具 有 一 个 其 他 分 布 并 不 具备 的 一 个 有 趣 而 重要 的 性 质 . 
考虑 一 个 伯 努 利 试验 序列 ， 设 工 是 直到 第 一 次 出 现成 功 的 试验 〈 包 括 出 现成 功 那 次 
BREA) My, WPCTOD=¢. REM m RK PR GMM, Wik mK 
上 失败 以 后 ， 出 现 第 一 次 成 功 所 需 的 等 待 时 间 的 分 布 还 是 {gq:}， 它 与 前 面 失败 的 次 数 
无 关 ， 换 句 话 说 ， 等 待 时 间 再 延长 上 的 概率 与 等 待 时 间 总 长 度 超过 的 初始 概率 是 
一 样 的 ， 如 果 一 个 原子 或 某 个 零件 的 寿命 服从 几何 分 布 ， 则 不 会 发 生 老 化 现象 . 一 
个 现存 的 原子 ， 它 在 下 一 次 试验 中 训 变 的 概率 总 是 一 样 的 ， 放射 性 原子 就 具有 这 种 
性 质 〈 只 是 在 连续 时 间 的 场合 ， 应 以 指数 分 布 代替 几何 分 布 )， 反 之 ， 如 果 一 种 现 
象 完 全 无 记忆 (或 者 说 不 会 老化 ) ， 则 其 持续 时 间 服 从 几何 分 布 或 指数 分 布 ， 一 个 
熟知 的 典型 的 例子 是 电话 的 会 话 ， 它 经 常 作 为 不 连贯 的 完全 依赖 瞬时 冲动 的 模型 . 
会 话 的 结束 是 一 种 瞬时 的 偶然 结果 ， 而 与 此 前 会 话 已 持续 多 长 无 关 . 与 此 相反 ， 如 
果 已 经 有 5 分 钟 没 来 公共 汽车 了 ， 则 很 快 就 要 来 公共 汽车 的 希望 大 增 ， 在 扔 便 币 的 
游戏 中 ， 正 面 和 反面 出 现 的 累积 次 数 发 生 在 第 二 次 试验 的 概率 是 1/2， 然 而 ， 在 已 
知 它们 不 相等 的 条 件 下 ， 再 经 过 两 次 试验 而 出 现 相 等 的 概率 是 1/4. 这 些 都 是 有 仿 
效 的 例子 . 

为 了 严格 地 表述 上 面 的 论断 ， 假 定 等 待 时 间 工分 别 以 posp pt RAE 0,1, 
2,…. 今 工 的 分 布 具有 下 列 性 质 : 在 第 下 次 试验 之 前 等 待 时 间 尚 未 结束 的 条 件 下 ， 而 
在 第 到 次 试验 等 待 时 间 结 束 的 条 件 概率 为 p。( 即 是 在 第 1 次 试验 结束 的 概 洽 )， 则 p 
=(1— p) po, PP TRAIA D A. 

为 证 此 论断 ， 我 们 再 一 次 引进 尾 概率 

Oe = 十 peo + Peg bees = PLT > k}. 
我 们 的 条 件 是 T 汪 k 一 1， 其 概率 为 g 1!， 因 此 T= 上 的 条 件 概 率 为 p;/g-1， 由 前 面 的 
假设 有 
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Pe _ 
gn, e (9.1) 
因为 Pea, BREA 09.1) 化 为 
qi 
4k — 1p. 
Je Po (9.2) 
KHH g= p + po HS fos 所 以 qg = (1> po)", 从 而 Pe = qei q = A 
Po) * Po. 论断 证 毕 . > 


在 随机 过 程 论 中 ， 记 忆 缺 损 ， 是 与 马尔 可 夫 性 相 联系 的 . 在 第 15. 3 节 中 还 要 回 
过 采 讨 论 这 类 问题 . 


13.10 更 新 理论 


作为 循环 事件 的 理论 基础 的 卷 积 方 程 ， 具 有 上 比 前 一 节 中 所 见 到 的 更 为 广泛 的 应 
用 . 因此 ， 我 们 还 要 重新 论述 它们 的 很 一 般 分 析 内 容 ， 并且 描述 其 概率 更 新 理论 及 
其 在 各 种 总 体 的 研究 中 的 应 用 . 
首先 从 两 个 任意 的 实数 序列 万 , 户 ,… 和 如 总， 开始 ， 于 是 用 卷 积 方程 式 : 
Un = ba + fi Vna F fotre Htt fivo. (10. 1) 
可 定义 一 个 新 的 序列 w ,ww ，,…, 人 它们 是 由 (10.1) 式 递 归 地 定义 的 ， 并 且 在 任何 情况 
下 ， 它 们 都 是 惟一 地 定义 的 . 然而 ， 我 们 只 考虑 满足 下 列 条 件 的 序列 : 


fr, Of = df, <; b, 之 0， b= 》 b, 到 co. (10. 2) 
在 这 种 情况 下 ，w APTA. h HHE eg BU TaM E : 
— BCs) 
Vio = 1— FG)’ (10. 3) 


Ef PRA FAB BE OSs <1 内 收敛 ， 从 而 (10. 3) Æ FO<1 的 地 方 定 义 了 一 个 
ICE. 关系 式 10.1) 和 “(10. 3) 是 完全 等 价 的 ， 在 第 3 节 中 ， 我 们 曾 考虑 
过 BG) 二 1 (对 一 切 n u= u) 的 特殊 情况 . 第 5 节 涵 盖 了 限制 和/ 委 1 的 一 般 情形 . 
为 了 能 应 用 到 总 体 理 论 中 去 ， 我 们 将 允许 三 >1， 笠 好， 这 种 情形 很 容 史 化 为 标准 情 
Ww f=. 

POP LARA, MERET n= 是 4 的 倍数 以 外 ， 其 他 的 f,=0, H 
称 满 足 上 述 性 质 的 最 大 的 整数 RED. ORB, FOF CSR SBR 
wm, (AX rl, FORE "RRR. SO 


1. 取 fo=0. (10.1) 易 见 ， 对 0 二 有 过 1 的 情形 只 有 符号 的 变化 ， 雇 fe/A—foltt fer A/a fo) 
AR br. 

2. fn HIERE, (EO RAYNOR BATA. MR b= f=oo, -WABE TAE 
失 ， 当 f=, (10.7) 仍然 对 ， 只 不 过 这 时 FP (OR—EARR, 4 b=0oH F(A) =00, 
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u= X nf, Z (10. 4) 
为 了 方便 起 见 当 p= ont, u | RR RE O. 
定理 1 (更 新 定理 ) RE 10.2) 成 立 而 且 {f,}) 是 非 周 期 的 . 
G) 如 果 f<1, U uy 而 且 


A 5b 
21% = I (10. 5) 
Gi) 如 果 f=1, X 
U, > by. (10. 6) 
Gi) WH fol, Y F(&) 二 1 存在 惟一 一 个 正 根 ， 而 且 此 根 满 足 : 
_ Be 
Ev, FMON (10. 7) 


EBR E<, ASAP OBA. (10.7) wH: 序列 {vw} 最 终 会 具有 公 比 
Wy E> 1 的 几何 序列 的 性 质 . 

证 结论 O 和 (ii) 在 第 5 节 中 已 经 证 明了 .为 证 Gi, ABPAR GD 应 
用 到 序列 {8"),{6,2") 和 {we") 中 去 即 可 ， 这 三 个 序列 的 母 咀 数 分 别 为 FCS), BCS) 
和 V(&). > 

上 面 把 序列 {f) 是 周期 的 情形 排除 了 ， 因 为 这 种 情况 对 我 们 来 说 ， 兴 趣 较 小 ， 事 实 上 ， 
它们 并 不 提供 多 少 新 的 东西 ， 确 实 ， 如 果 {b} 和 {f,} 具 有 相同 的 周期 *， 那 么 BOS) FCs) ap 
是 wy 的 军 级 数 ， 因 此 ，V(s) 也 具有 周期 +4”， 因 此， 定理 1 可 以 应 用 到 序列 { fn) (be } M on E 
+, CAT EA ER Fst) BOS AU VGt). 4 FC)=1it, 有 ws 一 欠 /py、， 因 为 一 般 的 
TRA B 能 够 写成 下 述 4 SERA B; 的 线性 组 合 : 

Bos) = Bals) + sB) + ee + e Ba lo (10. 8) 

其 中 每 个 B 都 仅仅 包含 了 形 如 s* HR. 将 此 引入 (10.3) 并 应 用 刚才 陈述 的 结果 得 到 下 面 的 
定理 . 

定理 2 假定 (10.2) Až, 而 且 { 了 f,}) 具 有 周期 A 之 1， 

(i) 如 果 f<1, WM (10.5) AŽ; 

Gi) 如 果 =1， 则 对 7 一 0，1，…，A) 一 1， 当 7 一 co 时 总 有 : 


Uni; > AB;(1)/n; (10. 9) 
GD 如 果 fll, M j=0, 1, =, Al, Bn TONSA: 
E U mt —~ AB 0 / C). C10. 10) 


在 循环 事件 中 使 用 过 的 ， 证 明 某 些 概率 满足 形 如 (10.1) 的 卷 积 方程 式 的 推理 ， 
对 许多 随机 过 程 ， 也 是 可 能 应 用 的 . 许多 以 这 种 方式 出 现 的 重要 的 极限 定理 ， 部 可 
以 作为 定理 1 的 简单 推论 ， 这 种 方法 现在 已 经 取代 了 古老 的 笨拙 的 方法 而 变 为 广 为 
人 知 的 更 新 理论 ， 只 有 用 于 具有 连续 时 间 参 数 的 过 程 ， 其 威力 才能 充分 显现 , 但 最 
初 的 两 个 例子 仍 可 作 一 些 直观 说 明 ， 进 一 步 的 例子 见习 题 8 一 9， 定 理 1 对 非 概率 的 
极限 定理 的 应 用 含 于 例 (c)， 最 后 两 个 例子 是 为 实际 应 用 而 提供 的 . 
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例 〈a) 迟 延 的 循环 事件 ， 我 们 将 给 出 第 5 节 中 关于 述 延 的 循环 事件 $6 的 结果 一 
个 新 的 推导 ，8 的 循环 时 间 的 分 布 为 { 户 ) 而 其 第 1 次 出 现 的 分 布 为 415) Su, 是 5 在 
第 nn 次 试验 出 现 的 概率 ， 我 们 证 明 〈10.1) Ey. 8 在 第 ?次 试验 出 现 有 两 种 方法 . 
此 次 出 现 是 第 1 次， 那么 其 概率 为 6,， 否 则 ， 在 第 nn 次 试验 以 前 ，& 存 在 一 次 最 后 出 
现 ， 所 以 存在 一 个 数 1 二 ;二 n， 使 得 6 在 第 j 次 试验 出 现 而 且 下 一 次 出 现在 第 n 次 试 
验 ， 而 此 事件 的 概率 为 上述 两 种 情形 是 互 太 的 ， 所 以 

v, = b, tu fer +H tofe +e umfi» (10. 11) 
这 与 (10.1 完全 一 样 ， 因此， 其 母 函 数 六 由 0.3) 所 给 出 ， 这 与 第 5 PHAR 
也 完全 一 - 样 . 〈 虽 然 结果 形式 上 是 一 样 的 ， 但 推理 不 同 ， 在 第 5 节 中 ， 是 根据 8 的 第 
1 次 出 现 来 列举 推导 的 ， 而 现在 的 推理 则 用 了 最 后 一 次 出 现 ， 两 种 推导 都 用 了 其 他 情 
形 ， 而 且 有 时 还 导出 了 形式 上 不 同 的 方程 式 . ) 

(b) 击 中 概率 .考虑 一 个 具有 完全 〈 非 迟延 的 ) 常 返 的 循环 事件 8 的 试验 序列 
Ay 0 是 一 个 整数 ， 假 定 我 们 开始 仅仅 观察 第 v 次 试验 以 后 的 过 程 ， 而 且 只 对 6 下 
一 次 出 现 的 等 待 时 间 感 兴趣 、 更 形式 化 地 说 ， 对 r= 二 1,2,…, 令 w,(r) 表 示 在 第 v 次 试 
难以 后 ，8 在 第 〈u 十 r) 次 试验 第 工 次 出 现 的 概率 . 因此 ，r (7) 二 了 ,tw,(0) 二 0. 
[ 因 其 在 随机 徘徊 中 的 意义 而 称 w,(r) 为 击 中 概率 ， 在 其 他 的 主题 中 ， 更 目 然 地 万 称 
它 为 始 于 第 v 次 试验 的 剩余 等 待 时 间 的 分 布 ， 参 见 第 15.2 Wh Ceo. J 

为 了 确定 这 些 概 率 ， 应 用 下 面 的 标准 的 更 新 理论 的 推理 .8 可 能 最 初 一 次 出 现在 
第 (v 十 r) 次 试验 ， 对 应 的 概率 是 fao BW, FEDER kv, 使 6 第 1 次 出 
现在 第 上 次 试验 ， 第 次 试验 以 后 继续 进行 的 过 程 是 整个 过 程 的 概率 复制 ， 除 了 原始 
的 第 wv 次 试验 现在 变 为 第 (v 一 &) 次 试验 以 外 ， 因 此 ， 此 事件 的 概率 为 ferwer), 
从 而 对 每 个 > >00, A 


wr) = fort > fiwa lr). (10. 12) 


此 方程 式 就 是 〈10. 1) eR, RAMEE mM. E, RIIAT EE K 
数 不 感 兴趣 ， 只 希望 对 非常 大 的 n， 描 述 击 中 概率 的 渐 近 性 质 ， 这 可 由 定理 1 来 完 
成 ， 令 : 


Oe = fea t+ fee ve" (10. 13) 
回顾 第 11 章 〈1.8) ， 平 均 循 环 时 间 满 足 
“w=aters. (10. 14) 
如 果 8 是 非 周期 的 ， 从 定理 1 得 知 : 当 vce 时 有 
w) a H u< os (10. 15) 
0, 当 u= o. 


此 结果 非常 有 趣 ， 平 均 循环 时 间 有 限 草 涵 了 (o/00 是 一 个 概率 分 布 ， 从 而 有 一 
个 标准 形式 的 极限 定理 .然而 ， 当 /一 ceo 时， 等待 时 间 超 过 任 一 事先 给 定 的 整数 二 的 
概率 趋 于 1， 换 名 话说， 等待 时 间 比 循环 时 间 本 身 的 性 质 差 许 多 ， 在 第 二 卷 中 将 要 许 
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细 讨 论 此 意外 的 现象 所 具有 的 重要 推论 . 〈 也 可 参见 习题 10. ) 

(c) 重 复 平均 ， 不 面 的 问题 是 一 个 分 析 性 质 ， 并 曾 在 各 种 主题 中 用 许多 精巧 的 方 
法 处 理 过 . 假定 fj; 20 A 用 十 … 十 所 二 1， 任 意 给 定 r 个 数 vi,…,w,, 定 义 其 加 权 平 均 
fiv, tee fv. 定义 无 穷 序 列 U svs OF; 从 给 定 的 rv, ett U, 开始 ， 用 前 r 
项 的 加 权 平 均 来 定义 v PRM, WEE nr, EM 

Un = fiver tort frog (10. 16) 
因为 序列 fio fo FEARS -项 终止 ， 所 以 这 些 方程 式 都 是 形 如 〈10.1) 的 .再 定 
Sb E 0.1) 对 一 切 都 对 ， 这 就 是 说 , 令 bo =u =0 而 且 
b, = Up — fiver mot frau kr (10.17) 
AJF k >r, HEM O=0.) 不 用 任何 计算 ， 由 定理 1 推出 : 用 这 种 重复 平均 法 得 到 
的 vu, 趋 于 有 限 的 极限 . 为 了 计算 此 极限 ， 我 们 必须 估计 =b ++ +6,. 用 〈10. 13) 
中 的 记号 来 表示 之 大 的 残部 ， 由 10.17) A (10.6) HN: 
U, > EEEE (10. 18) 


例如 ， 如 果 r=3, FARRAH, M h=h=h= =: 而 且 


vy > = (vu, + 2u + 3v;). (10. 19) 


我 们 如 此 容易 地 推出 这 个 结果 ， 并 不 能 掩盖 下 列 事 实 : 离开 现在 这 一 主题 问题 
将 是 很 难 的 . 〈 另 外 的 处 理 匈 第 15. 4 节 习 题 15. ) 

(d) 自我 更 新 集合 .我 们 回 到 第 2 节 中 的 例子 ， 那 儿 ， 一 个 在 时 刻 n CRSA 
寿命 具有 概率 分 布 (! 户 }， 当 它 坏 损 时 ， 立 刻 用 一 个 同一 类 型 的 新 的 零件 蔡 换 ， 因 此 ， 
连续 的 替换 构成 了 一 个 相依 的 试验 序列 中 的 党 返 的 循环 事件 ，“〈 其 结果 决定 于 是 否 
替换 .) 

假定 有 一 个 在 0 已 有 有 & 岁 的 零件 被 安装 上 (这 上 比 新 的 更 有 意义 ).， 这 只 影响 第 一 
个 等 待 时 间 ， 所 以 8 变 为 迟延 的 循环 事件 .为 了 得 到 第 一 个 等 待 时 间 的 分 布 {6,}， 首 
先 注意 ; b, 是 “已 知 某 零 件 已 活 上 有 岁 ， 它 将 在 n 十 k 岁 坏 损 ” 的 条件 ) 期 望 ， 因 此 ， 
当 上 之 1 时 ， 

b, = fro/ri;y 此 处 = fea + fag Fere (10. 20) 

在 实际 中 ， 不 是 安装 某 设备 的 一 个 零件 ， 而 是 一 个 整个 的 总 体 〈 壁 如 说 ， 某 城 
市 的 街灯 )， 它 由 N 个 零件 构成 ， 其 中 及 个 的 年 龄 是 上 岁 ，( 此 处 8B 一 NN)， 每 一 
个 零件 生成 一 条 在 时 刻 n 要 求 替 换 的 后 代 线 .在 时 刻 nn 要求 替换 的 总 数 的 期 望 值 显然 
满足 (10.1) 其 中 | 

b = ER f niala. (10. 21) 
此 处 是 第 一 个 例子 ， 其 中 w 是 一 个 比 概率 还 合适 的 期 望 ， 我 们 仅仅 知道 v <N. 

简单 计算 可 证 5 二 2b, 一 N， 因 此 当 替 换 是 非 周 期 的 时 候 ， 由 定理 1 可 证 nN e 

此 结果 蕴涵 了 年 龄 分 布 的 稳定 的 极限 的 存在 性 ， 事 实 上 ， 对 一 个 在 时 刻 n 恰 为 & 岁 
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的 零件 ， 其 充分 必要 条 件 是 它 在 时 刻 n 一 & 安装 上 而 且 它 能 继续 存在 & 岁 ， 因 此 ， 这 
种 零件 的 期 望 数 为 vr;， 而 且 当 mn 一 oo 时 它 趋 于 Nr /x 

换 句 话说 ， 当 时间 继 续 下 去 的 时 候 ， 总 体 中 年 龄 为 下 岁 的 比例 趋 于 re/， 因 此 ， 
极限 的 年 龄 分 布 与 初始 的 年 龄 分 布 独立 而 只 依赖 于 死亡 率 fan 在 很 广泛 的 条 件 下 ， 
类 似 的 结果 也 成 立 ， 关 于 数值 说 明 ， 参 见 表 13- 3. 它 显示 出 一 个 值得 注意 的 事实 : 
它 并 不 单调 地 通 近 极限 ，( 见 习题 16 一 18. ) 


表 13-3 第 10 节 例 (da) 中 所 描述 的 总 体 中 的 年 龄 分 布 的 分 解 的 说 明 


n: 0 j! 2 3 4 5 6 7 OO 
k=0 900 397 411.4 442 423.8 414.3 417.0 416.0 416.7 
l 320 400 317.6 329. 1 329.6 339. 0 331.5 333. 6 333.3 
2 74 148 185 146.9 152.2 152. 4 156. 8 153. 3 154. 2 
3 100 40 80 100 79. 4 82.3 82. 4 84. 8 83. 3 
4 6 15 6 12 15 11.9 12.3 12. 4 12.5 


每 一 列 给 出 了 总 体 有 N=1000 个 元 素 在 每 个 时 刻 n 二 0，1,…，7 的 年 龄 的 分 布 ， 同 时 有 其 极限 分 布 ， 
假定 死亡 率 为 :! 
fi=0. 20, fz =0. 43, f3=0. 17, fa =0. 17, fs =0. 03, 
因此 ， 没 有 一 个 零件 有 效 地 达到 5 岁 . 


(e) 人 群 总 体 ， 我 们 用 最 简单 的 人 群 总 体 模型 来 作为 一 个 例子 ， 此 时 f= Ul. 此 
模型 上 面 的 例子 中 的 模型 除 下 面 几 点 不 同 外 是 类 似 的 ， 总 体 大 小 是 变化 的 ;“ 女 性 出 生 ” 
代替 “和 蔡 换 零件 ” 新 的 特色 是 : 一 位 母亲 可 能 有 任意 多 个 女儿 ， 因 此 ， 她 的 后 代 可 能 灭 
绝 也 可 能 在 数量 上 增加 ， 定 义 Sf, 是 一 位 母亲 在 n 岁 还 存活 并 且 生 出 一 个 女孩 的 概率 〈 忽 
略 它 对 前 一 代 小 孩 的 个 数 及 年 龄 的 依赖 性 )， 则 f=, 是 女儿 个 数 的 期 望 值 ， 从 而 在 一 
个 健康 的 人 群 中 有 : 1 A, eR 1 断言， 总体 的 大 小 粗略 地 说 按 常 数 & 的 比例 增 
加 ， 而 且 总 体 的 年 龄 分 布 按 前 一 个 例子 所 描述 的 那样 趋 于 一 个 极限 .此 模型 是 粗糙 了 一 
些 ， 然 而 仍然 提供 一 些 实际 用 途 ， 没 有 完善 的 数学 分 析 ，& 的 极限 性 质 的 严格 依赖 性 是个 
能 预测 的 . > 


“13. 11 基本 极限 定理 的 证 明 


在 第 3 节 中 ， 我 们 略 去 了 定理 3 的 证 明 . 现在 复述 如 下 : 令 刻 ,f，… 是 一 个 非 负 
实数 序列 ， 满 足 ， 溃 有, 二 1, 而 且 1 是 满足 Sl 的 一 切 n 的 最 大 公 因 子 . 令 ww 王 1， 和 
Un = fiu + fouro tt fato» n=l. C11. 1) 

则 


L 方程 式 1—F(s) <0 的 根 为 1， -2, 一 5， 和 士 2i。、 平 均 循环 时 间 是 2. 40. 
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un >u, 此 处 = 2 nf (11. 2) 
( 当 =o, uw 理解 为 0). 
我 们 先 给 出 两 个 在 概率 论 以 外 广泛 应 用 的 引 理 .它们 并 不 完全 为 了 证 明基 本 定 
理 . 
令 A 为 满足 f, > 0 的 全 体 整 数 半 所 构成 的 集合 ， 并 令 A 是 全 部 下 述 正 的 线性 组 
合 所 构成 的 集合 : 
pia 二 "+t pa, (11. 3) 
其 中 asea, BTA, p; 部 是 正 整 数 . 
引 理 1 存在 一 个 整数 N， 使 A 包含 一 切 满足 条 件 了 二 的 整数 了. 
证 ”从 欧 几 里 得 几何 知道 ，1 是 集合 A 中 的 数 的 最 大 公 因 子 意味 看 ， 可 知 选取 AA 
中 的 整数 a ,…,a, 和 不 一 定 正 ) 整数 c 使 
ca 十 … 十 ca 一 1】. (11. 4) 
A s=a teta. Gren FARM HARK n=as+y, HP rA y g 
是 整数 而 且 Sy <s. 因此 


n= >) (ray)a (11.5) 
= 


ME r AKF y 乘 |c|(R=1…… 六 中 的 最 大 者 时 ， 上 式 右 边 上 所 有 的 系数 都 是 正 的 ， P 
引 理 2 GARAR) 假定 对 每 个 v0， 给 定 一 个 数 序列 LP 2? oh Oy? S. 
则 存在 一 个 序列 UP pv ,…: 一 coo,v 跑 遍 此 序列 使得: 对 每 个 固定 的 ,zi” 存在 极限 . 
证 ! 选择 一 个 增 序列 vi? ,vw?,… E1 o PR ET, xi? Boe BI PBR oz. TE 
此 序列 中 选 出 一 个 子 序列 Vl, oS, oe, EIG vo BR ET. x3? 2, Ge PS, 
对 每 个 2z， 我 们 得 到 一 个 整数 序列 vy oo, 1879 v HP 2 Sz, 而 且 vw)” 的 
每 个 元 素 都 属于 前 一 个 序列 (vw) ot 最 后 ， A vP =, Fron RT WM n TA 
外 ， 每 一 个 元 素 v? 都 出 现在 vir wre HT, AM o WRES o”, u, BY 
Ye, > 


引 理 3 Afw, (2 一 0, 士 1, 士 2,… ‘) 是 一 个 双 无 穷 的 数 序列 ， 且 满 足 Kw, Sl, 


和 
w, = Pa 一切 (11.6) 
te Kw =l, Magn RA w <1. 
证 ”因为 
w = D2 fw < >) _ 1 ， (11.7) 


1. 证 明 是 基于 康 托 (G. Cantor,1845 一 1918) 的 对 角 线 方法 ， 它 已 变 成 一 种 标准 工具 ， 但 在 康 托 时 代 ， 
却 是 非常 新 颖 的 方法 . 
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RAF ww 二 1 要 上 述 两 个 级 数 逐 项 相等 ， 从 而 对 每 个 R， 要 人 么 f5, WA wl. it 
KBB aCA, A w =l 但 是 ， 对 n= 的 论证 对 ?三 一 a 也 可 应 用 ， 因 此 当 整 
数 a MORETA, wael MAARTE, HEDER mA, RE m>N, 
RA wn=l BÆ, KAAT n =Ni}, 16) 右边 等 于 1， 所 以 www 二 1， & 
n 二 一 NN 十 1， 用 类 似 的 方法 得 知 w-n+ =l, 如 此 继续 下 去 ， 用 归纳 法 可 证 : Xf— H] n 


部 有 w=l. > 
定理 的 证 明 . > 
y= lim SUD Up. C11. 8) 
由 OLD UL O<y 过 1， 从 而 存在 一 个 趋 于 co 的 序列 mm, 疡 …* 使 得 ， 当 v—oontt 
Uy, >N. (11. 9) 
对 每 个 正 整数 w， 定 义 一 个 双 无 穷 序 列 (un) 如 下 : 
rn : 之 一 v 
oa “nær (11. 10) 
0 当 n (<r,. 


为 了 表述 简单 起 见 ， 引 理 2 对 简单 序列 来 陈述 , 但 显然 它 也 可 以 用 于 双 无 穷 序 列 . 
因此 ， 可 以 选取 一 个 上 升 的 整数 序列 vw ，vw,，… 使 得 当 v 跑 遍 它 时 ，w” 趋 于 极限 
(对 每 个 n)， 由 它们 的 构造 ， 有 0 三 w, 志 %， 而 且 way WI, We van >, 
定义 ALD 化 为 


u” — So fees (11. 11) 


取 极 限 ， 得 〈11.6)， 因 此 ， 由 引 理 3w, 王 7 对 一 切 n RY. 
现在 ， 进 行 最 后 一 段 推理 ， 如 前 一 样 ， 令 
Ok = frat feet” (11.12) 
FH n=l, WALoe=p [ 见 第 11 章 1.8). 把 定义 的 关系 式 (11.1) 对 n=l, 
2,… ,NN, 求 和 并 归 项 可 得 等 式 : 
Oo UN Fourni T'u + pny = I. (11.13) 
我 们 对 N=u. ws “AURA ERA. 4 N EXI, una mw = 
对 每 个 k 都 成 立 ， 当 二 部 0 二 oo 时 ，wy 二 yx， ， 剩 下 需要 证 明 的 是 ， 此 蕴涵 了 ur 一 7 对 
N 以 任何 方向 趋 于 co 都 成 ， 由 上 极限 的 定义 有 uv <y 十 e 对 每 个 固定 的 & 和 充分 大 
的 N 都 成 立 ， 此 外 ， 对 一 切 nu, <1. Auk, BE N 以 某 种 方式 趋 于 ce 使 ww 一 加 
由 (11.13) 显然 有 
ponot (a tet pate) + Cena T pm 全) =i, (11. 14) 
从 而 
ao (ym Z P Heat) 21. (11. 15) 
但 是 ,由 7 的 定义 知 wy 一 1 而且 yoy. HF C115) 对 任意 e 0 都 成 立 ， 因 此 
no=n 所 以 不 管 N 以 任何 方式 趋 于 ce， 总 有 uve. > 
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13.12 4 题 


iw F(Cz) 是 一 个 多 项 式 . 用 第 11. 4 市 的 部 分 分 式 法 证 明 第 3 节 的 所 有 定理 . 

重复 扔 > 个 硬币 ， 设 8 表示 下 述 循环 事件 ,~ 个 硬币 中 的 每 一 个 出 现 正面 的 累积 数 与 出 现 
反面 的 累积 数 相等 8 RMR? 估计 8 BPRS. 

E— ES SAR RP, SERRA. PL, cee ， 六 点 出 现 的 
累积 次 数 相 等 这 一 事件 ， 证 明 8 是 一 个 暂 留 的 〈 周 期 的 ) 循环 事件 ， 并 估计 8 迟早 要 出 现 
的 概率 . 

在 一 个 伯 努 利 试验 序列 中 ， 当 成 功 的 累积 次 数 是 失败 的 累积 次 数 的 太 倍 时 8 出现 ， 此 处 
是 一 个 正 整 数 . (HB 1 PA o] WEARS BAIR ARMS p/9 二 7+， 即 是 PHA/AT). 
提示 : 利用 正 态 逼近 . 

在 一 个 伯 努 利 试 验 序列 中 ， 我 们 说 6 出现， 如 果 累 积 成 功 次 数 是 累积 失败 次 数 的 两 倍 但 又 
从 未 超过 两 倍 ， TEAS 是 暂 留 的 周期 的 ， 其 母 浮 数 由 三 次 方程 式 FCs) =¢qs(U(s) ps)’ PR 
E. (Gi: Ul) ps 是 成 功 次 数 超过 失败 次 数 两 倍 的 等 待 时 间 的 母 滴 数 . ) 

令 {X 是 相互 独立 的 具有 公共 分 布 的 数值 随机 变量 序列 .假定 它们 只 取 十 1 或 一 1， HERR: 
事件 “S, — 0, S <0. S,-1 <0” ER. AM. 

盖 革 计数 器 . [ 见 第 1 节 例 (g) 和 ao] ON, 和 2; 分别 为 到 时 刻 n〔 含 时 刻 n) 为 止 
E 出 现 的 次 数 和 被 记录 的 次 数 . 讨论 这 两 个 随机 变量 的 关系 并 求 出 下 (2 和 Var(Z, ) a 
在 型 盖 革 计数 器 中 ， 每 一 个 到 来 的 质点 (不 管 它 被 记录 与 否 ) 都 锁 住 计数 项 恰巧 个 时 
间 单 位 〈 即 是 ， 在 到 来 以 后 还 要 锁 r 一 1 次 试验 ). 因 此， 记录 一 次 以 后 的 锁 住 时 间 长 度 征 
一 个 随机 变量 ， 求 出 其 母 函 数 G， 如 果 8 还 代表 计数 器 处 开启 状态 这 一 循环 事件 ， 用 C@ 表 
示 8 的 循环 时 间 的 母 函 数 FF， 最 后 ， 找 出 平均 循环 时 间 . 

一 类 更 一 般 的 盖 革 计数 器 ， 如 在 习题 8 中 假设 : 如 果 每 一 个 到 来 的 质点 完全 消除 前 一 个 
质点 的 影响 ， 但 是 一 个 质点 锁 住 计数 器 的 时 间 长 度 是 一 个 具有 母 晤 数 B4s) 的 随机 变量 
[在 前 一 个 问题 中 ，B(s)==s* ]、 在 此 一 般 条 件 下 ， 再 做 习题 8 中 事情 . 


， 对 一 个 迟延 的 循环 事件 8 而 言 ， 只 有 当 8 的 第 ERBERI BO =F) jy 


(1 一 ) 时 ， 即 是 刀 二 fti 十 f+z 十 … 时 ， 概 率 uv. 才 是 常数 ， 讨 论 与 第 10 TR Cb) 中 的 
击 中 概率 的 极限 定理 的 关系 . 


， 找 出 扔 10 000 次 硬币 中 长 为 3 的 成 功 连 贯 次 数落 在 700 到 730 之 间 的 概率 的 近似 值 . 
.在 扔 硬币 的 试验 序列 中 ， 令 8 代表 样 型 HTH， 仿 HE ERT 次 试验 中 不 出 现 的 概率 . 


找 出 其 母 函 数 ， 并 用 部 分 分 式 法 求 出 其 渐 近 展 式 . 
在 第 8 节 例 〈a) 中 ， 游 戏 的 时 间 长 度 的 期 望 值 为 

pa pen / Cpa T p)» | 
此 处 wy 和 po 分 别 为 长 为 > 的 成 功 连贯 的 平均 循环 时 间 和 长 为 o 的 失败 连贯 的 平均 循环 
时 间 . 
假定 每 次 试验 的 可 能 结果 为 A,B 和 C， 对 应 的 概率 为 a,8 和 7y(a 十 8 十 Y= 二 1)， 找 出 下 列 事 
件 的 概率 的 母 函 数 : 


15. 


16. 


17. 


18. 


19. 


20. 


21. 


22. 
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(a) n 次 试验 没有 长 为 r 的 A 连贯 ; 
(b) nn 次 试验 没有 长 为 r 的 A 连贯 或 如 连贯 ; 
(O 中 次 试验 没有 长 为 > 的 任何 连贯 . 
( 续 上 题 )， 找 出 第 1 个 长 为 + 的 A- 连贯 在 第 1 个 长 为 p 的 B- 连贯 ， 日 终止 于 第 nn 次 试验 
的 概率 ， (提示 : HR (8.6) PRI dC), 除了 用 a 代 下 中 的 o,8 代 G 中 
HJ o. )' 
自我 更 新 集合 ， 在 第 10 节 例 Cd) 中 ， 假 定 寿命 分 布 为 几何 分 布 fi 二 4“ p， 找 出 年 龄 的 
极限 分 布 . 
( 续 上 题 )， 称 初始 的 年 龄 分 布 { 有 &) 是 平稳 的 ， 如 果 在 所 有 时 间 它 都 不 变 。 证 明 不 必 计 
AB) REH R= rnui, (OT EF a. 
(CLA) Su, OREN n tA k SHIRA TRS. RENTEA. HH 
它们 验证 总 体 大 小 保持 为 常数 0， 此 外 ， 证 明 期 望 数 ww (nn) 满 足 : 

wn) = wy(n—1)fi/ro tum (n—Dfe/nm te 


令 8 为 常 返 的 周期 的 循环 事件 .假定 : 循环 时 间 具 有 有 限 的 均值 jy AT oo. tla = fi H 
frat ste = Gnti Faar Fo. ERRERA OOA RO S=1 i. FHE: 


L 1 R(s) 
w + Dj (ty =s OS) (12.1) 
和 
wt oo 一) = eee (12. 2) 
=] 
令 8 为 常 返 的 循环 事件 ，N 是 8 在 7 次 试验 中 出 现 的 次 数 ， 证明 : 
r 一 ] 
ECN?) = wm +e +u,+2 Dm (uy Hee Hun) (12. 3) 
从 而 ECN2) E FUR eR aA s 前 面 的 系数 : 
F*(s) + F(s) 
(1—s5){1— Fos) }*° (12. 4) 
(注意 ; PAW AIH ae BRR.) 
A> Orn =P{N,=n}. 证 明 qk, ate FFI RAA s* 的 系数 : 
F*(s) oe (12.5) 
并 推出 : EN A ECON? ) 分 别 为 
F(s) , 
(l1—s){1— F(s)} (12, 6) 
和 (12.4) 的 5 的 系数 . 
利用 习题 19 的 记号 ， 证 明 


CUFO is sy l FO 


1. 原著 中 把 x(s) 误 印 为 (5s)，G 误 印 为 8， 一 一 译 者 注 


23. 


24. 


25. 
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因此 ， 利 用 上 一 习题 可 证 : 


EN) = + te (12. 8) 
此 处 6 一 0. 
( 续 上 题 )， 利 用 类 似 的 推理 证 明 ， 
E(N?) = e+ ae, 2.9) 
此 处 a,/r 一 0， 因 此 
Var(N,) ~ Fr (12. 10) 
[提示 ; 把 (12.4) 与 (12.7) 之 差分 解 成 三 个 分 式 ， 它们 的 分 母 包 含 因 于 (1 一 s)* ,二 1,2， 


3. | 
在 一 个 伯 努 利 试验 序列 中 , S un ERARA Bn PE HR b BER 次 试验 的 概 
率 ， 用 习题 21， 证 明 母 函数 Q(x) = 》 qe.wr" 是 下 列 函数 的 s* 的 系数 ， 
1 — ps’ 

1—staqp'’s™* —(1— ps) psr’ 
此 外 接着 证 明 : 分 母 的 按 绝对 值 最 小 的 根 5 之 1 十 qp’ (1 一 x)， 
CGE LA) 长 连贯 的 泊 松 分 布 !， 当 试验 次 数 站 与 连贯 长 度 -都 趋 于 ce 且 使 Aa 庆 一， 则 
恰 有 7 个 长 为 7 的 连贯 的 概率 趋 了 eX"/n!. 
提示 : 利用 前 一 个 习题 ， 证 明 其 母 函 数 渐 近 地 为 {1 十 gp Oa) Swe. 利用 第 
11. 6 节 的 连续 性 定理 . | 


1. 此 定理 由 冯 。 米 泽 斯 所 证 明 . 但 现在 的 方法 比 他 的 方法 简单 . 


第 14 草 随机 徘徊 与 破产 问题 


14.1 一 般 讨 论 


此 章 第 一 部 分 讨论 伯 努 利 试验 .为 叙述 生动 ， 再 次 使 用 赌博 和 随机 徘徊 中 的 形 
象 语 言 . 

考虑 一 个 赌 徒 ， 他 在 每 次 试验 中 ， 分 别 以 概率 p Ag 说 一 元 或 输 一 元 ， 设 他 的 
初始 赌 本 为 z， 对 手 的 初始 赌 本 为 a 一 z2， 故 双方 赌 本 共 为 a。 HH BETES 
徒 的 赌 本 减少 到 0 或 增加 到 a 为 止 ， 也 就 是 说 ， 进 行 到 两 个 赌 徒 中 有 一 个 破产 〈 输 
光 ) 为 止 ， 我 们 关心 的 问题 是 赌 徒 破 产 的 概率 及 赌博 持续 的 时 间 的 概率 分 布 . 这 就 
是 十 典 破 产 〈 输 光 ) 问题 ， 

物理 中 的 各 种 应 用 与 模拟 促使 我 们 采取 “质点 ”在 工 轴 上 的 运动 这 种 更 易 掌 握 
的 解释 .质点 从 原始 位 置 xz 开始 ， 根 据 试验 的 结果 是 成 功 或 失败 ， 它 沿 x 轴 的 正方 
向 或 负 方 向 移动 一 个 单位 步 . 质点 在 nn 步 以 后 的 位 置 代 表 n KRW AEN IEA, 
当 质 点 第 一 次 到 达 0 或 a 时 试验 结束 . 我 们 称 质 点 的 这 种 运动 为 在 0 和 a 处置 有 吸收 
壁 的 随机 徘徊 .这 种 随机 徘徊 被 限制 在 1,2,…,a 一 1 这些 可 能 位 置 . WRK ARIK 
壁 ， 则 称 随机 徘徊 是 无 限制 的 (自由 的 )， 物 理学 家 用 随机 徘徊 作为 一 维 扩 散 或 布 晴 
运动 的 粗粮 近似 ， 其 中 物理 质点 由 于 受到 大 量 分子 的 碰撞 而 产生 随机 运动 ，p >a 的 


情况 对 应 于 向 右 漂移 ， 这 时 质点 受到 来 自 左 方 的 冲击 的 可 能 较 大 ， 如 果 p=, 


则 称 随机 徘徊 是 对 称 的 . 

在 a->co 的 极限 情形 ， 我 们 得 到 在 半 无 穷 直 线 上 的 随机 徘徊 .质点 从 xz 二 0 出 发 
作 随 机 徘徊 ， 直 到 它 第 一 次 到 达 原 点 时 为 止 ， 在 这 种 陈述 中 ， 我 们 遇 到 了 初 过 时 间 
问题 ， 在 第 3 章 中 我 们 曾 给 出 它 的 初等 解法 〈 至 少 是 对 称 情 形 )， 在 第 11. 3 市 中 又 利 
用 母 函 数 的 工具 给 出 了 它 的 另 一 种 解法 . 我们 将 要 看 到 ， 本 章 中 有 些 公式 以 前 曾 得 
到 过 ， 不 过 ， 现 在 的 方法 是 目 革 的 . 

本 章 中 ,我 们 将 使 用 差分 方程 式 的 方法 ， 此 种 方法 可 作为 扩散 理论 的 微分 方程 
式 的 导 引 ， 这 种 模拟 自然 地 导致 古典 破产 问题 的 各 种 修改 和 推广 一 个 典型 的 各 
有 教 益 的 例子 是 用 反射 壁 和 弹性 壁 来 代替 吸收 壁 . 为 了 描述 反射 壁 ， 把 如 前 定义 的 
随机 徘徊 作 下 面 的 修改 ， 当 质点 位 于 点 1 时 ， 它 以 概率 p 运动 到 位 置 z， 而 以 概率 q 
留 在 点 1， 用 赌博 的 语言 来 说 ， 这 对 应 于 下 面 的 规定 : 当 赌 徒 输 掉 他 最 后 一 元 财 本 
时 ， 他 的 对 手 慷 慨 地 把 这 一 元 还 给 他 ， 因 而 赌博 可 以 继续 进行 下 去 . 物理 学 家 想像 
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在 z 轴 的 志 处 置 有 如 下 性 质 的 一 面 墙 ， 由 1 向 0 运动 的 质点 被 墙 反射 ， 故 质点 回 到 1 


而 不 能 到 达 O. 吸收 壁 和 反射 壁 都 是 弹性 壁 的 特例 . 我们 用 下 面 的 规则 来 定义 在 原点 
处 的 弹性 壁 ， 质点 从 位 置 1 以 概率 户 运动 到 .2; 而 以 概率 869 停留 在 1 处 ; 以 概率 
(1 一 6)g 运动 到 0 而 被 吸收 〈 即 过 程 结 束 )， 当 6= 王 0 时 ， 得 到 古典 破产 问题 或 吸收 
BE, 当 6 二 1 时 ， 则 得 到 反射 壁 ， 当 6 由 0 变 到 1 时， 我 们 得 到 一 系列 的 中 间 情 形 ， 6 
越 大 ， 过 程 持续 下 去 的 可 能 性 越 大 . 如果 有 两 个 反射 壁 ， 则 过 程 永远 不 会 结束 . 

在 第 2、3 两 节 中 ， 我 们 将 给 出 古典 破产 问题 及 其 推论 的 初等 讨论 ， 其 后 的 三 市 
比较 专业 (因而 可 以 略 去 )， 在 第 4、 第 5 两 节 中 ， RNS Kea h ei 
出 赌博 持续 时 间 的 分 布 的 明显 表达 式 ， 等 等 .第 6 节 讨 论 随机 徘徊 取 极 限 转化 为 扩 
散 过 程 的 概要 〈 扩 散 方程 式 的 形式 解 是 随机 徘徊 的 极限 分 布 )， 

在 第 7 节 中 ， 又 回 到 初等 讨论 ， 其 内 容 是 二 维 或 多 维 随 机 徘徊 ， 在 这 一 世 中 ， 
会 遇 到 一 些 新 的 东西 . 第 8 节 讨 论 一 种 完全 不 同 的 推广 ， 即 是 一 种 每 次 移动 不 限于 
一 个 单位 的 一 维 随机 徘徊 ， 它 可 以 跳跃 地 改变 其 位 置 ， 每 次 可 以 移动 单位 长 度 的 任 
意 倍 ， 这 种 广义 的 随机 徘徊 与 瓦尔 德 的 序 贯 抽样 之 间 的 关系 已 受到 普遍 的 注意 . 

最 后 一 节 (习题 〉 中 包含 了 正文 中 必 不 可 少 的 补充 以 及 其 他 方法 的 概要 . 我 们 
希望 ， 比 较 不 同 的 方法 ， 会 获取 极 大 的 教 益 . 

最 后 还 必须 强调 指出 ， 每 个 随机 徘徊 都 是 一 个 特殊 的 马尔 可 夫 链 .所 以 本 章 可 以 
作为 下 一 章 的 一 个 导论 . 有 几 个 随机 徘徊 的 问题 RRD 将 在 下 一 章 重 新 讨论 . 


14.2 古典 破产 问题 


在 这 一 节 中 ， 将 讨论 本 章 开 头 所 陈述 的 问题 ， 设 9. 为 财 徒 最 终 ' 破 产 的 概率 ， 访 
为 他 获胜 的 概率 ， 用 随机 徘徊 的 语言 来 说 ，q: Sp. 分 别 为 从 xz 出 发 的 质点 将 在 0 处 
与 a 处 被 吸收 的 概率 ， 我 们 将 证 明 ，p. 十 gq. 王 1， 所 以 我 们 不 必 考 虑 赌博 永 不 终止 的 
可 能 性 . 
在 第 一 次 试验 后 ， 该 赌 徒 的 资本 为 z 一 1 或 z 十 1， 故 当 1<z 二 a 一 1 时 必 有 : 
q: = bqa 99-1 (2. 1) 
如 果 z 二 1， 则 第 一 次 试验 后 就 有 可 能 破产 ， 故 此 时 须 用 a. 二 pq; 十 q RRE (2.1). 
如 果 z= 二 a 一 1， 则 第 一 次 试验 后 就 有 可 能 获胜 ， 故 q 1 二 99,:， 为 把 这 些 方 程式 统一 
起 来 ， 我 们 定义 : 
qg =l, gq,=9. (2.2) 
在 此 约定 下 ， 对 一 切 ze =1,2, ,a 一 1, 破 产 概率 都 满足 (2. 1). 


L 严格 地 说 ， 和 破产 的 概率 是 在 无 限 延 长 的 赌博 的 样本 空间 中 定义 的 ， 但 我 们 能 在 n 次 试验 的 样本 空间 
中 来 讨论 ， 在 n 次 试验 之 前 破产 的 概率 随 着 增加， 因而 其 极限 存在 .我 们 称 此 极限 为 “破产 概 
率 ” 本 章 中 ， 所 有 概率 都 可 以 用 这 种 方法 来 解释 ， 而 不 必 参 考 无 穷 样 本 空间 (参看 第 8 1). 


14.2 击 典 破产 问题 263 


形 如 (2. 1) 的 方程 给 是 差分 方程 式 ，(2. 2) 是 关于 q. 的 边界 条 件 . 将 用 特 解法 
推出 g, 的 明显 表达 式 ， 这 种 方法 也 可 用 于 更 一 般 的 情况 . 

首先 假定 p 关 9g， 易 证 差分 方程 组 (2.1) 有 两 个 特 解 : g.=1 和 9 二 (9g/p)*. 因此 
对 任意 两 个 常数 A 及 B， 序 列 


q.=A+ BT) , (2.3) 


E (2.1) 的 形式 解 ， 边界 条 件 2.2) 成 立 的 充分 必要 条 件 是 ，A 和 B 满足 下 列 两 
个 线性 方程 式 ，A 十 B=1 和 A 二 Bl(g/p)*= 二 0， 因 此 


_ (gq/p)°— p 
q. Co py I (2.4) 


是 满足 边界 条 件 (2. 2) 的 差分 方程 组 (2.1) 的 形式 解 . 为 了 证 明 (2.4) 确实 是 破 
产 概率 的 解 ， 只 需 证 明 解 的 惟一 性 ， 即 是 ，(2. 1) 的 一 切 解 都 具有 (2.3) WEA. 
易 见 ， 给 定 (2.1) 的 任 一 解 ， 可 取 常 数 A AB, 4 z= 0 和 z 一 1 时 ，(2.3) 与 
此 解 一 样 ， 由 此 二 值 出 发 ， 依 次 以 z= 二 1,2,3,… 代 入 (2.1) 可 求 出 一 切 其 他 的 值 . 
因此 ， 两 个 解 只 要 在 z 二 0 和 xz 二 1 一样 ， 则 此 两 个 解 恒 等 ， 从 而 每 个 解 都 具有 
(2.3) 的 形式 . 


当 p=g= 广 时， 上述 推 理 是 不 行 的 ， 因 为 此 时 两 个 形式 特 解 9. 一 1 和 q= a/p 


是 恒 等 的 ， 从 而 (2.4) 没有 意义 ， 然 而 ， 当 p= a= Zit, RIA-ERE ges M 


而 g¢.=A+ Bz x (2.1) 的 依赖 两 个 常数 A 与 B 的 解 . 为 了 满足 边界 条 件 (2.2)， 取 
A 二 1 和 A 十 Ba = 二 0， 因 此 : 


9 一 上 一 一 ， (2.5) 


a 


ERE, E (2.4) 中 令 po IPMN BEI. FATE KL. ) 


因此 我 们 证 明了 ， 当 pp 关 g at, MRRP RAH 〈2.4) wb. HE p=q=4 


时 ， 由 (2.5) 给 出 ， 赌 徒 获胜 的 概率 等 于 其 对 手 破产 的 概率 ， 故 此 概率 可 在 前 面 算 
出 的 概率 中 分 别 以 gq,p,a 一 z 代 g,p,a WISE. MONAT, BH p. 十 gq: 王 1. 

现在 我 们 把 前 面 的 赌博 规则 改变 如 下 : 设 赌 徒 甲 有 初始 赌 本 a， 其 对 手 拥 有 无 穷 
赌 本 ， 吴 徙 甲 有 权 在 任意 时 刻 停 止 赌博 ， 而 对 手 则 愿意 奉 陪 ， 赌 徙 甲 条 取 如 下 策略 ， 
当 他 输 光 全 部 赌 本 (破产 ) 或 者 赌 本 增值 到 a ( 净 赢 4 一 z) 时 停止 赌博 ， 则 g 是 他 
输 光 的 概率 ， 而 1 一 g, 是 他 获胜 的 概率 . 

在 这 种 赌博 规则 下 ， 赌 徒 甲 最 终 赢利 或 输 光 可 用 一 个 随机 变量 G 来 描述 ，G 分 
别 以 概率 1 一 g, 和 gq, 取 值 < 一 > 和 一 ~ HEP RABE: 

E(G) =a(1—g,)—z. (2.6) 

BR, 4p— dt. EG=0. 这 意味 着 ， 在 “公平 ”博弈 中 ， 赌 徒 甲 采取 上 述 策 略 ， 
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并 未 改变 博弈 的 “公平 ”性 ， 而 且 也 不 能 把 “不 公平 ”博弈 改变 成 “公平 ”博弈 ， 

H (2.5) 可 知 : Æ p= 的 情形 ， 一 个 拥有 初始 财 本 为 999 WREE, ATE W 
光 赌 本 以 前 而 赢得 1 元 的 概率 为 0.999. WR q =0. 6, p =0. 4, MAFA XERA 
的 ， 但 由 (2.4) 可 知 ， 赌 徒 输 光 以 前 赢得 1 元 的 概率 仍然 约 有 三 ， 一 般 地 ， 若 赌 徒 


的 初始 赌 本 很 多 ， 则 在 他 输 光 前 赢得 少量 金钱 的 可 能 性 很 大 . 
[此 结果 的 一 个 意外 的 推论 ， 见 习题 4. | 
下 面 研 究 改 变 赌 注 的 影响 ， 单 每 一 注 由 1 元 改 为 半 元 与 将 初始 赌 本 由 z 元 改 为 
2z 元 等 价 ， 对 应 的 破产 概率 g; 可 由 在 (2.4) 中 用 2z 代替 zx，2a 代替 a 而 得 到 ， 
IDEID (9/p)+(g/py 
4: (q/pe-l =" (Jati ` (2.7) 


表 14-1 破产 问题 的 举例 说 阴 


» , ` 3 概率 期 望 值 

破产 获胜 BaF 持续 时 间 
0.5 0.5 9 10 0. 1 0.9 0 9 
0.5 0.5 90 100 0. 1 0.9 0 900 
0.5 0.5 900 1000 0. 1 0. 9 0 90 000 
0.5 0.5 950 1000 0. 05 0. 95 0 47 500 
05 0.5 8 000 10 000 0.2 0. 8 0 16 000 000 
0.45 0.55 9 10 0. 210 0. 790 一 1.1 11 
0.45 0.55 90 100 0. 866 0.134 —76.6 765. 6 
0.45 0.55 99 100 0. 182 0.818 —17.2 171.8 
0.4 0.6 90 100 0. 983 0.017 —88.3 441. 3 
0.4 0.6 99 100 0. 333 0.667 —32.3 161.7 


初始 赌 本 为 x>， 当 赌 本 和 输 光 〈 输 > 元 即 破产 ) 或 增 至 a ( 赢 a 一 z 元 即 获胜 ) 时 赌博 结束 ， 


“4 o>pit, (2.7) 右边 的 分 式 大 于 1， 故 9: >q. 此 结论 可 改 述 如 下 : RE 
注 加 们 而 初始 赌 本 不 变 ， 则 破产 概率 对 于 成 功 概率 p 二 三 的 财 徒 来 说 是 减 小 的 ， 而 


对 其 对 手 (赌博 对 他 有 利 ) 来 说 则 是 增加 的 ， 例 如， 设 赌 徒 甲 初 始 赌 本 为 90 元 ， 而 
其 对 手 只 有 10 元 ， 且 p= 二 0.45， 而 赌博 对 甲 不 利 ， 如 果 每 次 赌注 为 1 元 ， 表 14- 1 说 
明 ， 甲 输 光 的 概率 约 有 0. 866， 而 把 每 次 赌注 改 为 10 元 时 ， 则 甲 输 光 的 概率 下 降 到 
原先 的 概率 的 1/4 以 下 ， 而 此 概率 约 为 0.210， 由 此 可 见 ， 增 加 赌注 的 影响 ， 比 我 们 
预料 的 要 显著 得 多 ， 一 般 地 ， 如 果 每 次 赌注 为 元 ， 则 在 《2.4) 中 以 z/& 代 xz， 以 
a /k 代 a 即 得 输 光 概率 ， 此 概率 随 值 增 加 而 减 小 。、 所 以 ， 在 每 次 赌注 都 不 变 的 赌博 


L 某 人 每 年 都 去 蒙特 卡 罗 赌 钱 ， 而 且 总 能 赢 回 他 的 旅费 .因此 他 坚信 有 某 种 超 机 遇 的 魔力 ， 其 实 他 的 
经 历 并 不 奇怪 ， 假 定 他 带 的 赌 本 是 他 的 赢利 的 10 倍 ， 每 年 赌 赢 的 概率 是 0.9， 连 赢 10 年 的 概率 大 


Ay E) ave! =~ 0. 37。 因 此 连 赢 的 可 能 性 也 不 是 小 到 不 可 能 的 地 步 . 


14.3 博弈 持续 时 间 的 期 望 值 265 


中 ， 赌 徒 可 以 适当 选择 与 其 事先 确定 的 赢利 金额 相 一 致 的 赌注 ， 以 使 其 输 光 概率 降 
到 最 小 ， 这 个 结论 的 实际 有 效 性 ， 通 常会 受到 那些 认为 “不 公平 ”的 博弈 本 来 就 不 
合理 的 人 的 质疑 ， 如 果 认 真 探讨 ， 那 么 ， 保 险 事业 就 不 会 存在 ， 因 为 参加 保险 的 而 
又 驾车 谨慎 的 司机 显然 与 保险 公司 进行 的 博弈 是 “不 公平 ”的 ， 实际 上 ， 没 有 一 条 
概率 论 的 定理 能 把 这 样 一 位 司机 从 保险 人 和 群 中 拉 出 来 . 
极限 情形 a 王 ce 对 应 着 这 样 一 类 赌博 : 其 对 手 是 一 个 拥有 无 穷 资 产 的 奋 竹 ， 在 

(2.4) 和 (2.5) BS a 一 ceo 得: 

g.= l 4 pq; 

= py “4p >q 
我 们 把 q. 解释 为 : -AAWA z A EA AERAR AR A E A AT 
博 ， 他 输 光 的 概率 :， 用 随机 徘徊 的 术语 来 说 ，e. 是 一 个 从 z >00 ERAB 
到 达 原 点 O 的 概率 . 很 自然 地 ， 要 把 此 结果 改 述 如 下 : 一 个 从 原点 出 发 的 随机 徘 
徊 ， 当 bo 时 它 迟 早 要 到 达 z> 的 概率 为 1， 而 当 户 <g 时 ， 此 相应 的 概率 为 
(p/q). 


(2.8) 
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博弈 持续 时 间 的 概率 分 布 将 在 下 一 节 推 导 ， 然 而 ， 基 期望值 却 可 以 在 这 一 方 用 
一 种 简单 的 广 为 应 用 的 方法 推出 来 ， 在 此 不 异 笔 看 地 说 明 此 法 . 
仍然 考虑 本 章 开 头 所 讨论 的 问题 假定 博弈 持续 时 间 的 期 望 有 限 为 已 知事 实 . 
此 事实 将 在 下 一 节 中 严格 证 明 . 
如 果 第 一 次 试验 的 结果 为 成 功 ， 则 博弈 就 像 初始 位 置 在 zx 十 1 那样 继续 下 去 ; HK 
在 第 一 次 试验 的 结果 为 成 功 的 条 件 下 ， 持 续 时 间 的 条 件 期 望 为 D. 十 1. 这 表明 : FF 
续 时 间 的 期 望 值 D. 满足 下 列 差 分 方程 组 . 
D.= pD..,;+9qD., +1, 0<z <a. (3. 1) 
其 边界 条 件 为 
D=0, £D,=0. (3. 2) 
由 于 (3.1) 中 有 常数 项 1， 故 差分 方程 组 (3. 1) 是 非 齐 次 的 . 如 果 pq, WD.=z 
a hE 3.1) 的 形式 解 . G.D 的 任何 两 个 解 之 差 A. 满足 齐 次 方程 式 A. 一 
pA.,1 十 gA._ 1! ， 而 我 们 又 知 此 方程 的 所 有 解 都 有 下 述 形式 : A 十 Bl(q/p)*， 因 此， 当 
pdt. (3.1) 的 一 切 解 都 具有 下 述 形 式 ， 


D.=——+A4+B(+):. (3. 3) 
gp F 


1. BL: qo 是 满足 边界 条 件 〈 现 在 只 有 一 个 ) qo 二 1 的 差分 方程 组 (2.1) 的 一 个 解 。 当 p 之 q 时 ， 
解 不 惟一 ， 实 际 上 ， 我 们 的 结果 包含 在 第 11 章 (3.9) P, 而 且 我 们 将 在 第 4 节 中 独立 地 推出 来 
(用 一 种 更 强 的 形式 ). 
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边界 条 件 (3. 2) 要 求 
A+ B~=0, A+ Bg/p)*=—a/(q—p). 
解 出 A 和 B， 得 到 
=- .lp (3. 4) 
9 一 户 Tp 1-~(q/p)’ 


当 p 一 g 一直 ， 上 述 方法 也 不 适用 ， 在 此 场合 ,我 们 用 3. 1) 的 一 个 解 一 KER 


z/(g 一 p)， 由 此 可 知 ， 4 p=q=sht, (3.1) 的 一 切 解 都 具有 下 述 形式 D.=— 2 + 


A+Bz. 满足 边界 条 件 G.D) WHA: 
D.=z(a-2z). (3.5) 

在 古典 破产 问题 中 ， 博 弈 持续 时 间 的 期 望 值 ， 按 户 天 9 或 户 一 9 一 也 分 别 由 
(3.4) 或 (3.5) 给 出 . 

应 当 指 出 ， 持 续 时 间 比 我 们 想像 的 要 长 得 多 . 设 两 个 各 有 500 TOA ee. 
以 扔 钱 作 赌博 ， 直 到 有 一 个 输 光 为 止 ， 其 持续 时 间 的 期 望 值 是 250 COOMA. 如果 
一 个 赌 徒 只 有 1 元 赌 本 而 对 手 有 1 000 元 ， 则 持续 时 间 的 期 望 值 是 1 000 次 试验 .更 多 
的 例子 可 参见 表 14-1. 

如 前 一 节 所 指出 的 ， 我 们 可 以 过 渡 到 < 一 ce 的 极限 情形 ， 即 考虑 一 个 赌 徒 与 具有 
无 穷 财 本 的 富翁 进行 赌博 ， 当 > 时， 赌博 可 以 一 直 进 行 下 去 ， 此 时 谈论 持续 时 间 
的 期 望 值 是 没有 意义 的 . 当 p 二 gq 时 ,我们 得 到 持续 时 间 的 期 望 值 是 elo p, 但 
是 当 p= 二 9g 时， 持续 时 间 的 期 望 值 是 co2，。( 同 样 的 结果 在 第 11. 3 市 中 已 经 建立 ， 并 将 
Aah Ve HE PF AE HA. ) 


“14.4 BARA PH A GA NT AIEE BRI BV 


FR PE FA BE PR BOTT FESR A A BR Td PA eT lB], CBN EO Ala A 
有 了 吸收 壁 的 随机 徘徊 中 的 相应 的 问题 . 初始 位 置 在 zx CHE O< <a). Ou. RB 
程 于 第 n 步 被 吸收 壁 0 吸收 而 结束 〈 即 破产 ) 的 概率 ， 第 一 步 后 质点 所 处 之 位 置 为 
xz 十 1 或 zx 一 1 ， 故 当 1<z <a 及 7 之 1 时 有 : 
| Wea) — Pustin F quein © (4.1) 
这 与 差分 方程 组 (2.1〉 BW, (AME 4.1) 依赖 两 个 变数 z Min. 和 第 2 节 类 似 ， 
我 们 要 定义 边界 值 ww, Uan A u. o IER z =1,z=a—1 An =0,64. 1) 仍然 成 立 ， 为 
n T Uan Os bn 之 1 (4. 2) 


* 此 节 及 其 相关 的 第 5 T, PEA A ARS. 
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及 
uo.o = 1 Uzo =O 当 O0<z Sa. (4.3) 
MW) (4.1) 对 一 切 满 足 0 二 z <a 的 z 和 一 切 n 0 都 成 立 ， 
现在 引进 母 图 数 
U.(s) = 5 Ue. yS” ， (4. 4) 
把 (4.1) AAEL sv SET n=0,01,2,°° KR AR. 
U.(s) = psU..., (s) t+ qsU.-; (s) ,0<z La, (4.5) 
由 边界 条 件 (4. 2〉 和 (4.3) 推出 ， 
U,(s)=1,， U,Cs)=0. (4.6) 


差分 方程 组 (4.5) 与 (2.1 类似 ， 而 边界 条 件 (4.6) 对 应 着 (2.2). 现在 的 
情况 是 ， 方 程 组 中 的 系数 与 未 知 孙 数 U,(s) 中 都 依赖 于 s， 但 就 差分 方程 组 而 言 ，s 仅 
仅 是 一 个 任意 的 常数 ， 如 果 我 们 能 求 出 (4. 5) 的 两 个 特 解 ， 则 第 2 节 中 的 方法 仍然 
可 以 应 用 .自然 地 ， 我 们 会 猜想 是 否 有 形 如 U,(s)= 二 和 * (3) 的 两 个 解 ? 以 此 代入 (4.5) 
可 知 ， XC) 必 须 满足 二 次 方程 式 


ACs) = pA (s)+ as, (4,7) 
HRN: 
_ _ —. 2 
ao = pas (sy = pas (4, 8) 
ps 2ps 


(我 们 取 O<s 二 1， 并 取 正 的 平方 根 ). 
我 们 已 经 求 出 4.5) 的 两 个 特 解 . 仿 第 2 节 ， 可 以 断言 ，(4. 5) 的 每 个 解 都 具 
有 如 下 形式 : 
Us) SADA (Cs) BCA GS) (4.9) 
其 中 A(s) 和 BCs) 可 为 任何 函数 .为 使 (4.9) RRA 4.6), DRA AGT 
BC) 二 1 和 ACs) Al (5) + BCs) Ag Cs) =0, FX 


U. Cs) Ai Cs) — A$ CS) (4. 10) 


利用 明显 的 关系 名.(5)Ahs(s) 二 gq/p， 上 式 可 简化 为 
UOS by OAO 
这 就 是 所 要 求 的 在 第 几 次 试验 破产 (或 在 0 处 被 吸收 ) 的 概率 的 母 函 数 . 用 类 似 的 
方法 ， 可 以 证 明 在 < 处 被 吸收 的 概率 的 母 聘 数 为 : 
Ai (s)—A3(s) 
Af (Cs) —AS CS) 
UAR, RARER BE PRE PR (4. 11) 和 (4.12) 之 和 . 
AA Kiel SIA 
前 面 的 讨论 可 以 平行 地 用 到 在 0 A AO EE EX E (0,00) AA BL AP A H 


(4. 11) 


(4. 12) 
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去 .一 个 质点 从 xz >0 HE., RAR O 吸收 或 者 此 随机 徘徊 一 直 继 续 下 去 .被 吸收 对 
应 于 ; 一 切 拥 有 初始 赌 本 为 z 的 赌 徒 甲 与 一 个 拥有 无 穷 赌 本 的 赌 徒 x ER. ERR 
产 ， 恰 在 第 ”次 试验 被 吸收 的 概率 x. ,的 母 函 数 U.(s) 也 满足 差分 方程 组 《4.5)， 央 
而 也 可 化 为 (4.9) 的 形式 ， 但 是 ， 除 非 A(s) ==0 此 解 是 无 界 的 ， 现 在 另 一 个 边界 条 
件 是 U,(3) 二 1， 从 而 BGs) 二 1]， 所 以 

U.(s)=Ai(s) ， (4. 13) 
[回忆 和 (is 一 gb， 在 (4.11) FS a >o2o 可 得 同样 的 结果 .| 

以 s= 二 1 代入 (4.13) BH: 当 p 达 9 时， 最 终 一 定 会 被 有 吸收 ， 而 当 p 这 gq 时， 被 
豚 收 的 概率 为 (g/p)*:， 第 2 节 中 已 得 天 过 同样 的 结论 ， 

在 0 点 被 吸收 ， 给 无 限制 的 随机 徘徊 的 初 达 以 另 一 种 主要 的 解释 、 确 实 ， 把 原 
ARS z， 我 们 发 现 : wu, 是 “从 原点 出 发 的 在 全 直线 上 的 随机 徘徊 在 第 nn 次 试验 初 
达 一 z < 二 0” 的 概率 ， 对 应 的 母 函 数 (4. 13) 是 的 上 次 宕 反映 了 这 样 一 个 明显 的 事 
K, 初 达 一 z 的 等 待 时 间 是 相继 初 达 一 1, 一 2,… ,一 的 z 个 独立 的 等 待 时 间 之 和 . 

对 p= 让 的 特殊 情形 ，u.. 的 精确 公式 在 第 3 章 (7. 5) 中 已 经 用 初等 方法 推导 出 
来 过 ， 注 意 ， 必 须 有 (Gn 十 z)/2 步 向 左 ，(n 一 z)/2 步 向 右 才 能 达 一 > 在 自前 的 一 般 情 


HTF. RY SAMIR po? QO MAR 2“ 以外， 其 他 公式 者 成立， 
所 以 


u == ( n ) (n—2) ‘2 rte) /2 

on a ateo] 9 
当 n 和 xz 的 奇偶 性 不 同时 ， 此 处 的 二 项 系数 理解 为 0， CFE a AR, 
请 见 第 11. 3 节 的 结尾 、 另 一 种 完全 不 同形 式 的 精确 公式 含 于 习题 13. ) 


"14.5 显 式 表达 式 


(4.11) 中 的 母 函 数 Us) 形 式 上 依赖 于 一 个 平方 根 ， 但 是 ， 实 质 上 它 是 一 个 有 
理 函 数 ， 事 实 上 ， 利 用 二 项 式 定理 ， 可 以 将 其 分 母 化 为 
XCs)—A(s)=s VT 一 4p9s Ps). (5.1) 
此 处 P, 4a 是 奇数 时 是 一 个 4 一 1 阶 的 偶 多 项 式 ， 当 a 是 偶数 时 是 一 个 < 一 2 阶 的 偶 
ZHR. (4.11) 的 分 子 除 了 用 ac 一 = 代替 a 以 外 ， 与 分 母 具有 同样 的 形式 ， 因 此 ,，U， 
是 两 个 多 项 式 之 比 ， 且 分 母 和 分 子 的 阶 数 至 多 差 1， 因此， 利用 第 11 章 第 4 市 的 部 
分 分 式 法 ， 可 以 推出 破产 概率 wu.., 的 显 式 表达 式 ， 结 果 很 有 趣 ， 因 为 它 与 扩散 理论 有 
联系 ， 而 且 其 推导 对 含 于 部 分 分 式 中 的 实际 应 用 技巧 提供 了 一 种 示范 . 
应 用 如 下 定义 的 辅助 函数 %， 可 以 极 大 地 人 简化 计算 : 


(5. 2) 


cos $= 


2/pqes 
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(对 O<s 过 1， 对 应 于 $$ 的 复位 ， 但 这 不 影 啊 正 式 的 计算 . ) 由 (4.8) A: 


àl = Va/p Leost i singi= /g/p e” (5.3) 
fe st AIAN i RLA: WES ACs). Pr 
— - Sin(a—z)$ 
Us =(V/¢/p) sina? (5.4) 
分 母 的 根 ,sy ,… 都 是 单 根 ， 所 以 ， 可 用 部 分 分 式 法 展开 如 下 : 
( Jal py nO At Bs +P + oe (5.5) 


原则 上 ， 我 们 只 需 考 虑 这 些 根 s,， 它 不 是 分 子 的 根 ， 但 是 ， 若 s 也 是 分 子 的 根 ， 则 
[六 (CS 在 s 连续 ， 从 而 p, 二 0， 因 此 ， 这 类 根 ， 不 会 对 右边 贡献 任何 量 ， 从 而 没有 必 
要 单独 处 理 它们 . 

显然 ， 根 9 ，… ,5 1 对 应 于 多 v= | a—l. Pre 


ST we (5. 6) 
当 v= MH a 又 是 偶数 时 ， 此 表达 式 没 有 意义 ， 但 是 这 时 多 也 是 分 子 的 根 ， 如 上 解 


释 ， 它 是 可 以 抛 掉 的 ， 因 为 它 对 应 的 项 在 最 后 的 结果 中 为 0. 
为 了 计算 p,， 把 (5. 5) 式 两 边 乘 以 ;, 一 s HA s>s. WIZ—F: sinag,=0, 
cosag 一 1， 得 到 | 


0, =(/q/p)* sing, + lim? — 


< sina $` 
微分 〈5. 2) ， 用 洛 必 达 法 则 可 算出 上 式 右 边 最 后 一 项 ， 结 东 古 : 
0 一 Q © 2 Vpg (/a/p) sin z9, ‘sing, © so 
把 (5.5) 的 右边 展 成 几何 级 数 得 知 ， 对 n 之 1 总 有 : 


WU 一 Dy ese" | =@'2 y palsy qí pY Ss Jei e sing, © sinz$, 


a—l 
— Yr f TL à TU + Te 已 
Un = a 2p" gqg™ 2 cos”! 一 Sin 一 Sin ——. (5.7) 
a` a a 


这 就 是 在 第 ,次 试验 的 破产 概率 的 明显 表达 式 、 这 个 公式 曾经 由 拉 格 朗 日 和 其 他 作 
家 用 各 种 不 同 的 方法 推出 过 :， 但 是 在 许多 近代 文献 中 还 可 重新 见 到 ， 有 趣 的 是 ， 像 
方法 (或 重复 映像 ) 可 推出 wu.., 的 另 一 种 用 二 项 系数 表示 的 明显 表达 式 . 在 第 16. 3 
节 给 出 了 (5.7) 的 另 一 种 推导 方法 . 

当 a 一 co 时 ， 我 们 得 到 了 一 个 拥有 初始 赌 本 = 的 赌 徒 甲 与 一 个 拥有 无 穷 赠 本 的 加 
SHEAN., KERES ”次 试验 破产 的 概率 . 〈 见 习题 13. ) 


1. RA CR. E. Ellis) 用 三 角 插 值 法 给 出 过 一 个 初等 的 推导 见 L86]. 
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一 腿 就 可 看 出 : 对 应 于 求 和 指标 为 v 一 & 和 一 a 一 & 的 两 项 的 绝对 值 是 一 样 的 ， 
Snail: 的 奇偶 性 相同 时 ， 它 们 的 符号 是 一 样 的 ， 而 奇偶 性 相反 时 ， 它 们 相互 抵消 
fa, (A, ze 为 琳 数 时 ,二 0， MA noz 为 偶数 且 n 放 1 时 有 : 


Men = AL pP ga * 24 cos" =- sin =s sin e, (5.8) 
其 中 求 和 号 是 对 一 切 小 于 的 正 整数 求 和 . 


此 表示 式 比 (5.7) 更 自然 ， 因 为 现在 系数 cos 一 构成 一 个 单调 下 降序 列 ， PELA n Æ 
分 大 后 ， 实 质 上 仅仅 第 1 项 需要 计算 . 


“14.6 与 扩散 过 程 的 关系 


在 这 一 节 中 ， 非 正式 地 讨论 一 种 随机 徘徊 ， 其 每 一 步 的 长 度 都 非常 小 ， 但 两 步 
之 间 的 时 间 间 隔 非常 短 以 致 于 好 像 质 点 在 作 连 续 运 动 ， 极 限 情况 就 引出 维 纳 过 程 
(布朗 运动 ) 或 其 他 的 扩散 过 程 ， 和 弄 清 这 些 过 程 与 随机 徘徊 的 紧密 联系 ， 对 理解 这 
两 者 都 有 很 大 的 好 处 !， 这 个 问题 如 像 它 曾 用 物理 术语 描述 过 一 样 ， 亦 可 用 数字 
AIR. 
最 好 是 从 由 原点 出 发 的 无 限制 的 随机 徘徊 开始 ， 第 n 步 使 质点 处 于 位 置 S,， 其 
中 S 二 Xi 十 … 十 X, 是 nn 个 相互 独立 的 随机 变量 之 和 ， 而 且 每 个 X, 分 别 以 概率 p 和 和 
q 取 值 十 1 和 一 1， 因 此 
ECS, )=(p—q)n, Var(S,)=4pqn. (6. 1) 


第 3.6 节 图 3- BER T RXARREVLA p— = BHP. BEALL aE HBA 


书 的 一 页 中 去 ， 需 要 选 好 两 个 坐标 轴 的 尺度 ， 现 在 进一步 关注 随机 徘徊 的 运动 图 像 
假定 取 1000 秒 (2516 到 17 分 钟 ) ， 这 期 间 随 机 徘徊 要 运动 1 000 000 步 ， 也 就 是 每 
一 步 只 花 1/1000 秒 ， 这 就 固定 了 时 间 尺 度 . 对 确保 记录 与 给 定 的 高 度 的 栅 隅 相 匹 
配 ， 选 取 什么 单位 是 合理 的 呢 ? 对 此 问题 ， 我 们 用 一 个 固定 的 测量 单位 ， 比 如 说 ， 
英寸 或 英尺 来 作为 栅 隔 和 每 一 步 长 的 单位 ， 于 是 ， 我 们 不 再 关心 随机 变量 S,， 转 而 
研究 6S,， 其 中 6 代表 每 一 步 的 长 度 . 因为 

E(C6S,)=(p-qQMeén;, Var(éS,) =4pq¢ dn, (6. 2) 
由 中 心 极限 定理 易 知 : RAX} n=1 000 000. (6.2) 中 的 两 个 数 都 比 栅 隔 的 寓 度 小 ， 
才 可 能 有 观察 得 到 的 影像 但是， 若 p 关 q hon 与 栅 隔 的 宽度 差不多 ， 则 2 SOIL 
平一 样 ， 从 而 影像 星 直线 运动 而 无 明显 的 随机 起 伏 ， 只 有 当 on 是 一 个 适度 大 小 的 正 


1， 此 法 有 深厚 的 历史 ， 马 舍利 耶 CL. Bachelier) 和 作 了 开创 性 的 工作 (尽管 是 探索 性 的 ). 他 的 工作 
鼓 钴 了 科 尔 英 苞 罗 夫 去 欧 定 马尔 可 夫 过 程 的 严谨 的 数学 基础 特别 地 ， 可 参见 文献 C87]. 
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数 ， 随 机 徘徊 的 性 质 才能 显现 出 来 ， 为 此 ， 只 有 当 p 一 g 与 6 的 大 小 差不多 才 行 . 

如 果 问 题 是 纯 数学 的 ， 我 们 断言 : 除非 p 二 gqg， 所 要 求 的 图 像 表示 是 不 可 能 的 ， 
但 是 ， 从 物理 观点 着 眼 . 情况 就 完全 不 同 了 . 在 布朗 运动 中 ， 我 们 发 现 悬 译 在 液体 
中 的 质点 以 随机 的 方式 运动 ， 自 然 会 产生 这 样 的 问题 : 这 种 运动 是 否 可 解释 为 小 量 
质点 在 液体 中 多 次 猛烈 碰撞 的 结果 ? 当然 ,下面 的 假设 过 于 简单 : 碰撞 的 时 间 间 隔 
是 一 致 的 而 且 每 次 碰撞 引起 的 位 移 都 精确 地 为 士 $ 不 管 怎 么 说 ， 作 为 初步 的 探讨 ， 
我 们 用 伯 努 利 试验 观 其 效应 ， 并 问 观察 到 的 质点 的 运动 是 否 与 此 图 形 一 致 ， 在 单位 
时 间 内 的 实际 观察 中 ， 我 们 发 现 一 个 平均 位 移 c 和 方差 D. Sr RAR) 是 单位 时 
间 内 的 碰撞 次 数 ， 则 渐 近 地 有 

( 力 一 0)8r 一 Cc， 4pqe’r=D. (6. 3) 
除非 (6. 3) 中 的 两 个 条 件 对 D>0 都 满足 ， 模 拟 的 实验 观察 不 到 随机 起 伏 ， 一 个 具 
A p=0.6 和 5r 二 1 的 实验 是 可 以 想像 的 ,但 是 其 中 的 方差 是 如 此 的 小 以 致 于 运动 呈 
现 出 决定 性 的 而 非 随 机 的 ) 现象 ， 一 团 最初 紧 靠 在 一 起 的 质点 ,一 直 紧 靠 在 一 起 ， 
尤 如 一 个 稳定 体 . 

本 质 上 看 ， 把 一 个 系统 中 的 状态 的 缓慢 的 起 伏 解 释 为 随机 碰撞 引起 的 一 系列 的 
微小 变化 时 ， 前 面 的 讨论 可 以 类 似 地 应 用 到 许多 物理 ， 经济， 教育 学 ， 进 化 理论 
tere cyl thi HEIMEN SC AR EE PRA. BE F 
好 其 情况 与 在 中 心 极限 定理 中 出 现 的 类 似 . 在 非常 宽松 的 条 件 下 ， 单 个 变化 的 性 质 
并 不 重要 ， 因 为 观察 到 的 效果 只 依赖 它们 的 期 望 和 方差 .在 这 种 情况 下 ， 目 然 拿 们 
单 随机 徘徊 模型 作 万 能 典型 . 

总 而 言 之 ， 作 为 更 深入 研究 各 类 随机 过 程 的 准备 ， 自 然 要 考虑 这 样 的 随机 徘徊 ， 
其 中 每 一 步 的 长 度 6 是 很 小 的 ， 单位 时 间 运 动 的 步 数 r 是 很 大 的 ， 而且 p 一 g 很 小 ， 
平衡 条 件 (6. 3) 也 成 立 (那儿 c A D>. 都 是 给 定 的 常数 )， 词 “大 ”、“ 小 ”是 售 精 
的 ， 有 伸缩 性 的 ， 这 取决 于 实际 应 用 中 的 需要 . 

问题 的 分 析 表 述 如 下 : 对 6,r 和 p 的 每 一 种 选择 ， 对 应 着 一 个 随机 徘徊 ， 我 们 


问 ， 当 8 一 0,r->o0 和 pp 一 三 且 满 足下 列 条 件 时 ， 


(p—qgér—c, 4pqðr>D, (6. 4) 

随机 徘徊 的 极限 情况 会 发 生 什么 ? 
有 两 种 可 取 的 办 法 . 当 我 们 拥有 相关 的 概率 的 时 候 ， 可 以 直接 取 极 限 .我 们 将 
用 此 法 来 论证 ， 因 为 它 会 给 第 3 章 中 得 出 的 极限 定理 和 正 态 和 逼近 以 新 的 光彩 ， 此 法 
应 用 范围 有 限 ， 因 为 它 本 身 不 易 推广 ， 更 有 效 的 方法 是 : 从 随机 徘徊 决定 的 差分 方 


1. 单位 时 间 内 分 子 的 碰撞 次 数 是 超出 想像 的 ， 另 一 个 极端 是 进化 理论 ， 一 代 到 下 一 代 的 变化 是 小 的 ， 
而 且 两 代 之 间 的 间隔 不 能 小 到 用 天 来 作 标准 .考虑 代数 也 不 是 没有 根据 的 ， 但 是 可 能 进行 数 干 代 . 
要 点 是 ， 过 程 在 这 样 一 种 时 间 尺 度 下 进行 ， 使 得 在 实际 中 出 现 的 变化 是 连续 的 ， 具 有 连续 时 间 参 数 
的 扩散 模型 要 比 随机 徘徊 模型 好 . 
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程 组 开始 ， 进 而 导出 其 极限 形式 的 微分 方程 组 ， 由 此 得 出 ， 由 这 些微 分 方程 决定 的 
完全 定义 了 的 依赖 过 续 时 间 参 数 的 随机 过 程 ， 对 这 些微 分 方程 式 的 各 种 明显 的 推广 ， 
类 似 的 结果 也 成 立 ， 因 此 ， 第 二 种 方法 可 以 推 许多 类 重要 的 扩散 过 程 . 
为 了 描述 最 简单 情形 的 直接 法 ， 我 们 仍然 令 {S,} 是 每 步 移 单位 长 的 标准 的 随机 
徘徊 ， 并 令 
Uen = P(S, =k}. (6.5) 
在 我 们 的 加 速 的 随机 徘徊 中 ,第 n PENA RE, TIE S=. RIRA 
趣 的 是 ， 在 给 定 的 时 期 +， 质 点 处 于 给 定 的 点 工 的 某 邻 域 的 概率 ， 因 此 ， 我 们 必须 研 
ZEM k-roo,n CoH WE n/r>t MRO mr 时 ， vw., 的 极限 性 质 ， 事 件 {S, =) ER n 


Ak 具有 相同 的 奇偶 性 ， 并 且 在 前 nn 步 中 恰 有 (n 十 8)/2 步 向 右 运 动 . 因此 ， 由 棣 莫 
弗 - 拉 普 拉 斯 通 近 可 知 在 极限 情形 有 : 


VU, ,~ l —£Pn+k) np] /(2npq) tthe Por 
y Zan pq v 2unpg 
NO -ee ADE) (6 6) 
4 a 
Af 2rDt 


此 处 一 表示 两 边 之 比 趋 于 1. AW un ERA Se 落 在 &6 MARTZ) 之 间 的 概率 ， 文 
因为 此 区 间 之 长 为 28， 所 以 可 以 说 : 比率 ww/(26) 局 部 地 度量 了 单位 长 的 概率 ， 四 
即 概率 密度 . (6.6) 中 的 最 后 一 个 关系 蕴涵 了 vw.,/(26) 趋 于 : 

Vn) 一 met oO, (6.7) 
因此 ， 概 率 ve BIRPI LARD vao IRIRE, HEE UE RAR PR a ET E E 
更 有 用 的 形式 


: 


1 BP ns, 
P< < 一 SG < 一 》 一 > | e (et) Dt dr. (6. 8) 
i p V DIE v« 


右边 的 积分 可 以 用 正 态 分 布 函 数 多 来 表示 ， 而 且 (6.8) EXE MIRR 
弗 - 拉 普 拉 斯 极限 定理 作 了 一 点 符号 变化 而 已 

其 于 适当 的 差分 方程 组 的 方法 ， 是 很 有 趣 的 ， 考 虚 第 nn 次 和 第 nn 十 1 Kid, © 
然 概率 y, ,满足 下 列 差 分 方程 组 : 


Venti = PVe-ien VUE (6. 9) 
乘 以 28， 再 利用 上 面 的 结果 可 知 极限 Ce, oe Be EY a E 
v(ttr! x)= pult;x— 8) +qvU,xr7d). (6. 10) 


Ay vu PERS, RUD RER DEBRA. EW Abe mite A A 
二 阶 通 近 得 到 《去 掉 后 面 的 项 以 后 ): 


OVX) ovlt), t Şults) | 
a =(g—p)ér a tor or Te, (6. 11) 


取 极 限 ， 略 去 的 项 趋 于 0， 于 是 (6.11) BW (6.11) RREK: 
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CASTE D ， Ou(t. zx) oY v(t, x) 
Ot QT ar ` 
这 就 是 一 个 特殊 的 扩散 方程 式 Bris AY ta 50-25 BA GE (Fokker-Planck) 扩散 方程 
式 ， 计 算是 正规 的 且 宣 有 探索 性 ， 组 〈6.7) 中 的 函数 ， 满足 微分 方程 式 (6. 12) 
并 不 令 人 惊奇 ， 此 外 还 可 证 明 ，(6.7) 是 具有 概率 解释 的 某 些 性 质 的 扩散 方程 式 的 
惟一 解 . 
扩散 方程 式 (6.12) 可 以 推广 到 c 和 DD 依赖 于 x 和 上 的 情形 ， 此外， 在 高 维 的 情 
形 ， 可 以 进行 类 似 的 推导 ， 而 且 所 有 这 些 推广 ， 都 可 以 从 一 般 的 概率 要 求 直 接 推 出 ， 
这 个 主题 将 在 第 二 卷 第 10 章 中 讨论 ， 此 处 ， 我 们 必须 简要 地 陈述 随机 徘徊 与 一 般 的 
扩散 理论 的 联系 . 
作为 第 二 个 例子 ， 取出 前 两 节 中 讨论 的 破产 概率 unn 基本 差分 方程 组 (4.1) 
5 (6.9) 的 差异 仅仅 是 系数 p 和 9g 交换 了 一 下 位 置 . :正式 计算 显示 ，(6. 11) 导出 一 
个 扩散 方程 ， 它 就 是 把 (6.12) 中 的 一 c 代 之 以 c 而 得 到 的 方程 式 ， 取 极限 可 以 由 
Wu 导出 函数 wu(i,&)， 它 满足 修正 的 扩散 方程 ， 而 且 它 还 有 类 似 于 ui 的 概率 意义 . 
EHE E> 开始 的 扩散 过 程 中 ,“ 质 点 在 到 达 a >E 以 前 到 达 原 点 ”这 一 事 发 生 在 时 
间 区 间 过 t 过 t;。 内 的 概率 为 : ulwu; 二 在 此 时 间 区 间 上 的 积分 . 
正式 的 计算 如 下 .对 u.,,;， 有 明显 表达 式 (5.8)， 因 为 z 和 nn 必须 有 相同 的 奇偶 
性 ，w ,对 应 于 nV/r 和 (n 十 2)/r 之 间 的 区 间 ， 我 们 要 计算 ~ 一 cp 和 6- 一 0 并 满足 (6. 4) 
时 ， 比 wsr/z 的 极限 、 区 间 长 度 a 和 初始 位 置 zx 必须 调整 到 能 得 到 极限 a AE. Al 
Ik, z~é/8, a~a/d. WEBRSS RH G.8) 中 单个 因子 的 极限 . 
从 (6.4) 4 2p~1+c6é/D, M E. 
2qg~1—cé/D, 
Dh (6.4) 的 第 二 个 关系 式 易 见 r->D， 因 此 
(4pq)?"(q/p)**~A— 28? /D? 7 (1 2e8/DY we FP © FP, (6.13) 
类 似 地 ， 对 固定 的 v 


+5D (6. 12) 


n 2 ŻE ， 
(cos 22") ~ (1— 5) 一 ee UR Dila, (6. 14) 
最 后 ，sinu xd/a~v no/a. RA (5.8)， 正 式 好 出 : 
u(t,6)=nDa te PDT ye P esin a (6. 15) 
u= 


(因为 级 数 一 致 收 伍 ， 不 难 验证 上 述 正式 的 计算 . ) 在 物理 的 扩散 理论 中 ，(6. 15) 称 
作 初 达 的 弗 思 (Firths) Ast. [对 一 ce 的 极限 情形 ， 见 习题 14. (6. 15) 的 男 一 种 形 
式 ， 见 习题 22. | 


1. 理由 是 ; tha, Pe 代表 初始 位 置 ， 而 wi. 是 破产 时 所 处 的 位 置 ， 用 第 二 卷 中 的 术语 来 说 ,依赖 于 
初始 位 置 的 概率 满足 倒退 (回顾 的 ) 方程 ， 另 一 个 前 进 (或 福 克 - 普 朗 克 ) THR AMR, RE 
时 候 称 后 者 为 连续 性 方程 .类 似 的 情形 ， 将 在 第 17 章 中 过 到 . 
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在 二 维 随机 徘徊 中 ， 质 点 沿 平行 于 z+ 轴 或 平行 于 yy 轴 的 四 个 方向 之 一 移动 一 个 
单位 距离 ， 对 于 从 原点 出 发 的 质点 来 说 ， 其 可 能 位 置 是 平面 上 所 有 坐标 为 整数 的 点 . 
每 一 个 位 置 有 四 个 邻近 的 位 置 ， 类 似 地 ， 对 三 维 情形 ， 每 一 个 位 置 有 六 个 邻近 位 置 . 
为 了 定义 随机 人 徘徊， 必须 给 定 对 应 的 四 个 或 六 个 概率 ， 为 简单 起 见 ， 我 们 只 考虑 所 
有 方 问 都 具有 相同 概率 的 对 称 情形 ， 问 题 的 复杂 性 比 一 维 的 情形 大 得 多 ， 因 为 现在 
限制 质点 运动 的 区 域 可 以 具有 任意 形状 ， 故 复杂 的 边界 取代 了 一 维 情形 的 单 点 壁 . 

我 们 从 波 利 亚 的 一 个 有 趣 的 定理 ' 开 始 . 

定理 在 对 称 的 一 维 或 二 维 随 机 徘徊 中 ， 质 点 迟早 要 返回 其 初始 位 置 的 概率 为 ] 
(因而 返回 其 初始 位 置 无 穷 多 次 的 概率 亦 为 1)， 然 而 ， 在 三 维 的 情形 ， 这 个 概率 二 1 
( 约 为 0.35， 其 返回 次 数 的 期 望 值 为 0. 65 RCO. 35)* =0. 35/0. 65-~0. 53). 

在 证 明 此 定理 之 前 ， 先 给 出 波 利 亚 所 作 的 两 种 说 明 . 首先 ， 由 这 个 定理 容易 推 
Hh: 在 一 维和 二 维 的 情形 下 ， 质 点 经 过 每 一 个 可 能 的 位 置 无 穷 多 次 的 概率 为 1; 然 
而 ， 在 三 维 的 情形 下 ， 上 述 结 论 都 不 成 立 ， 所 以 ， 此 定理 在 某 种 意义 下 ， 就 二 维 情 
形 而 言 ， 为 “条 条 道路 通 罗 马 ” 这 一 谚语 提供 了 根据 . 

男 一 方面 ， 考 虑 独立 地 作对 称 的 随机 徘徊 的 两 个 质点 .假定 它们 每 次 移动 都 同 
时 发 生 . 它们 是 否 迟 早 会 相遇 ? 为 叙述 简单 起 见 ， 我 们 定义 两 个 可 能 的 位 置 的 距离 
是 :从 一 个 位 置 到 另 一 个 位 置 的 最 小 步 数 . “于 是 ， 此 距离 是 对 应 的 坐标 之 差 的 绝对 
值 之 和 . ) 如 果 两 个 质点 各 移动 一 步 ， 则 它们 之 间 的 距离 或 者 保持 不 变 ， 或 者 改变 两 
个 单位 ， 所以， 它们 的 距离 或 者 在 所 有 的 时 刻 都 是 偶数 ， 或 者 在 所 有 的 时 刻 都 是 奇 
数 ， 在 第 二 种 情况 下 ， 这 两 个 质点 永远 不 会 占据 同一 个 位 置 ， 在 第 一 种 情况 下 容易 
发 现 ， 它们 在 第 nn 步 相遇 的 概率 等 于 第 一 个 质点 在 22 步 内 到 达 第 二 个 质点 的 初始 位 
置 的 概率 ， 因 此 由 定理 可 知 ， 在 二 维 的 情况 下 (在 三 维 的 情况 下 不 成 立 )， 两 个 质点 
必 有 无 穷 多 次 占据 同一 个 位 置 。 如 果 两 个 质点 的 初始 距离 为 奇数 ， 则 用 类 似 的 方法 
可 以 证 明 ， 它 们 将 无 穷 多 次 地 占据 相 邻 的 位 置 ， 如 果 把 这 两 种 情况 都 叫做 相遇 ， 则 
定理 断言 : 在 一 维和 二 维 的 情况 下 ， 两 个 质点 必定 相遇 无 穷 多 次 ， 但 是 ， 在 三 维 的 
情况 下 ， 两 个 质点 永 不 相遇 的 概率 大 于 O. 

证 ”对 于 一 维 的 情形 ， 此 定理 已 在 第 13 章 第 4 节 例 Cb) 中 用 循环 事件 方法 证 明 
过 了 ， 对 二 维和 三 维 的 情形 ， 可 根据 同一 思路 来 证 明 ， 设 un 为 质点 在 第 nn Kin Mik 
回 初 始 位 置 的 概率 ， 根据 第 13. 3 节 定 理 2， 我 们 要 证 明 在 二 维 的 情况 下 ，2u 发 散 ; 
而 在 三 维 的 情况 下 ，u, 守 0, 53， 对 二 维 情形 ， 仅 当 沿 z 轴 与 y 轴 的 正 回 移动 的 步 数 


x 本 节 讨 论 特 殊 主 题 ， 初 读者 可 略 去 . 
L WL [88]， 数 值 0. 35 era aE (W. H. McCrea) MIB (F.J. W. Whipple) 算出 的 ， 见 [89]. 
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分 别 等 于 沿 cS y 轴 的 负 疝 移动 的 步 数 时 ， 质 点 才 可 能 回 到 初始 位 置 ， 所 以 ， 若 7 
AW, M u =0; 再 利用 第 6 章 多 项 分 布 公式 9.2) 有 
_iliy (2n)! = 1 fényvwoyny’ 
un = Tm 24 ER RR ml, ) la) (7. 1) 


根据 第 2 章 公式 21D, ， 上 式 右边 等 于 42 (T). RSS AT. ue kK 


与 n BY. BRL E un R. 
在 三 维 的 情形 ， 用 类 似 的 方法 可 求 得 : 
1 (2n)! 
6" 24 JUE Tj Rn EL 
其 中 的 和 是 对 一 切 满 足 jtk <n 的 j BRERA. BUE: 
ni < 
to = 55 (5) ae TG pol) C7. 3) 


j.k 


花 括号 内 的 项 表示 三 项 分 布 ， 我 们 知道 ， 其 和 为 1， 故 其 平方 和 小 于 该 括号 内 的 最 大 
项 ， 而 后 者 在 7 Sk 最 接近 所 时 达到 ， 由 斯 特 林 公式 可 知 : 这 个 最 大 项 的 大 小 与 二 同 


阶 ， 故 wz, 的 大 小 与 4“ 同 阶 ， 所 以 本 uw, 收 合 ， 证 毕 . > 

最 后 ， 我 们 讨论 推广 吸收 壁 概念 的 另 一 问题 . 考虑 二 维 的 情形 ， 这 时 ， 代 和 蔡 区 
间 Oz Sa 的 是 一 个 平面 区 域 忆 ， 一 个 坐标 为 整数 的 集合 ， 每 个 点 都 有 四 个 邻近 的 
位 置 ， 但 对 于 D 中 的 某 些 点 ， 有 一 个 或 多 个 邻近 的 位 置 在 D 之 外 ， 这 种 点 构 成 DD 的 
边界 ， 其 余 的 点 都 称 为 内 点 . 在 一 维 情形 下 ， 边 界 由 两 个 壁 构成 我们 的 问题 是 要 
求 出 从 = 出 发 的 质点 到 达 a 之 前 到 达 界 边 点 0 的 概率 ， 类似 地 ， 现 在 我 们 要 求 出 : M 
点 在 到 达 某 段 边 界 之 外 的 任何 点 之 前 到 达 这 段 边 界 的 概率 . 这 意味 着 ， 我 们 把 边界 
点 分 成 B' 与 B 两 个 集合 ， 设 (z,y) 是 一 个 内 点 ， 我 们 要 求 出 从 (zyy) 出 发 的 质点 在 
到 达 如 "中 的 点 之 前 到 达 B 中 的 一 个 点 的 概率 uly). e, WRB 由 一 个 点 构 
成 ， 则 xz,y) 是 质点 迟早 要 被 这 一 个 特殊 的 点 所 吸收 的 概率 

设 (z,y) 是 一 个 内 点 ， 在 第 一 步 以 后 ， 质 点 从 (zy) 移 到 四 个 邻近 位 置 (z 十 1,y)， 
(zx,y 十 1) 中 的 某 一 个 ， 如 果 这 四 个 邻近 的 位 置 都 是 内 点 ， 则 有 : 


ul x,y) == [ulr+1,y)+u(r—1 ytulas,ytl)tulsr,y—1) J. (7.4) 


Un 


(7.2) 


这 是 一 个 偏差 分 方程 式 ， 它 对 应 于 一 维 情况 下 的 方程 式 2. 1) (其 中 p=q=7). M 


果 (zx 十 1,y) 是 一 个 边界 点 ， 则 对 应 于 它 的 项 w(x 十 1,y) 必 须 按 (x 十 1,y) 属 于 B 或 属 
于 MAHL I RORS. Biot, SURREY EB PH, 我 们 令 ull; 而 
XE pÆ B pat, Sule =0, WM (7.4) 对 所 有 的 内 点 都 成 立 ， 这 个 约定 相应 于 
一 维 情形 的 边界 条 件 (2. 2). 

(7.4) 是 关于 未 知 数 u(x,y) 的 一 组 方程 式 ， 每 个 内 点 对 应 于 一 个 未 知 数 和 一 个 
方程 式 ， 此 线性 方程 式 组 是 非 齐 次 的 ， 因 为 在 其 中 至 少 出 现 B 中 的 一 个 边界 点 
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(&,7)， 而 这 个 点 使 得 方程 式 的 右边 出 现 现 一 项 地， 如 果 区 域 D 是 有 限 的 ， 则 方程 式 的 


个 数 与 未 知 数 的 个 数 一 样 ， 所 以 ， 这 个 方程 式 组 有 惟一 解 的 充分 必要 条 件 是 对 应 的 
齐 次 方程 式 组 〈 对 于 所 有 边界 点 都 令 x(6, 力 =0) 只 有 恒 等 于 0 的 解 ， 由 于 x(z,y) 是 
四 个 邻近 值 url y) ,u(x,y 土 1) 的 平均 ， 所 以 它 不 可 能 比 这 四 个 值 都 大 ， 也 不 可 
能 比 它们 都 小 ， 换 句 话 说，xGCzyy) 既 不 可 能 是 严格 意义 下 的 极 大 值 ， 也 不 可 能 是 严 
格 意义 下 的 极 小 值 . 所 以 最 大 值 与 最 小 值 只 能 在 边界 上 达到 ， 因 此， 和 在 所 有 的 边 罚 
值 为 0， 则 w(x,y) 在 所 有 的 内 点 亦 为 0。 这 就 证 明了 7.4) 的 解 的 存在 惟一 性 ， 因 
为 边界 值 为 0 或 1， 故 一 切 u(x,y) 的 值 均 在 0 与 1 之 间 ， 这 正 是 它们 作为 概率 所 应 满 
足 的 条 件 . 根据 无 穷 马尔 可 夫 链 的 一 个 一 般 定 理 ， 我 们 将 要 看 到 : 以 上 陈述 对 于 无 
穷 区 域 的 情形 也 成 立 . 


“14.8 广义 一 维 随 机 徘徊 ( 序 贯 抽样 ) 


现在 再 回来 讨论 一 维 的 情形 ， 但 扬弃 质点 每 次 只 移动 单位 步 长 的 限制 .假定 : 
质点 每 一 步 由 工 移动 到 x 十 kk 的 概率 为 p;， 其 中 整数 可 以 是 零 ， HEREA. RI 
研究 如 下 的 破产 问题 ， 质点 从 位 置 zx O< <a) 出 发 ， 我 们 要 求 出 质点 在 到 达 任 何 
大 于 等 于 a 的 位 置 之 前 到 达 小 于 等 于 0 的 某 个 位 置 的 概率 zl， 换 句 话说 ， 质 点 在 第 n 
次 试验 后 的 位 置 是 xz 轴 上 的 点 z 十 Xi 十 Xs 十 … 十 XX,， 其 中 {Xi}) 是 相互 独立 的 具有 公 
共 分 布 {P,) 的 随机 变量 序列 ， 当 Xi 十 … 十 X, 筷 一 zx 或 XX 十 … 十 X, 宇 a 一 z 第 一 次 出 
现时 过 程 停止 . 

此 问题 ， 由 于 它 与 序 贯 抽样 有 关 而 受到 普遍 的 注意 ， 那 里 X 表示 样本 或 观察 的 
某 种 特征 ， 测 量 一 直 进 行 到 Xi 十 … 十 X, 落 在 两 个 事先 给 定 的 界限 〈( 即 一 zx 和 a 一 z) 
之 外 为 止 ， 出 现 第 一 种 情况 就 拒绝 ; 第 二 种 情况 就 接受 

例 (a) 取 巴特 基 的 双重 抽样 检查 方案 来 作 说 明 . 检验 一 种 货品 ， 抽 到 一 个 大 小 
为 N 的 样本 进行 全 面 检查 .假定 样本 是 统计 独立 的 并 且 每 组 样本 中 有 缺陷 的 赁 铝 毕 
件数 服从 二 项 分 布 ， 在 每 组 样本 中 ， 用 一 件 货 品 去 替补 一 件 有 缺陷 的 货品， 于 征 可 
A X, 十 1 是 第 & 个 样本 中 有 缺陷 的 货品 的 件数 . 因此 ， 对 & 之 0 有 


b= , M Jaig 


1. FUSE. MARTA, TW Rk. MPR RA AHA RM, WAN 
L89]. 
x 这 一 节 以 后 用 不 到 . 
2. 序 贯 分 析 是 瓦尔 德 在 第 二 次 世界 大 战 期 间 联系 一 些 重要 的 实际 问题 而 发 展 起 来 的 。 近 代 的 处 理 方法 
可 以 在 数理 统计 的 教科 书 中 找到 ， 巴 特 基 方案 是 用 1943 年 的 例子 来 描述 的 ， 这 或 许 是 最 早 见 诸 文 
献 的 序 贯 抽样 方法 . 
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MA p- 5s p50 对 一 切 x 过 一 1 操作 规则 可 描述 如 下 ， 抽取 一 组 原始 的 样本 ， 
如 宁 没 有 有 缺 路 的 赁 品 ， 则 整个 货品 都 接收 ;如 果 有 缺陷 的 货品 的 件数 超过 a， 则 整 
个 货品 都 拒 收 ， 因 此 ， 这 两 种 情况 出 现任 何 一 种 ， 抽 样 过 程 都 停止 如果 有 缺陷 的 
货品 的 件数 z PEKER IS <a 中， 则 抽样 按 上 述 方法 继续 进行 ，1 委 = 委 a 持续 多 
久 ， 抽 样 就 持续 多 久 . x 述 早 会 变 为 0( 这 时 接收 全 部 货物 ) 或 大 于 a (这 时 拒 收 全 
部 货物 ). > 
不 失 普 遍 性 ， 可 设 既 可 沿 正 方向 也 可 沿 人 负 方 向 移动 ， 否 则 对 --… 切 z， 或 者 u50 或 
者 二]， 显 然 ， 在 第 一 步 就 破产 的 概率 为 
r=p +p Fp- Fte (8. 1) 
(此 数 可 能 为 0)， 只 有 当 质 点 移动 到 位 置 WEO <a, ULAS AIT F 
E, Mz 中 到 去 的 概率 为 ， 而 此 后 破产 的 概率 为 x..。 所 以 


u. = Sup. 十 六 . (8. 2) 


此 处 ， 我 们 再 次 得 到 具有 a 一 1 个 未 知 数 的 a 一 1 个 线性 方程 式 . 方程 组 是 非 齐 次 的 ， 
因为 至 少 对 xz 二 1， 概 率 7 不 为 0 〈 因 为 允许 沿 负 方 向 移动 )， 为 证 线性 方程 组 具有 惧 
一 的 一 组 解 ， 我 们 必须 证 明 相 应 的 齐 次 方程 组 


U, 一 Supa. (8. 3) 
=] 


只 有 0 解 ， 为 了 减少 在 证 明 中 出 现 的 下 标的 个 数 ， 令 p40 CH, WRA AIEN 
的 正 项 ， 推 理 一 样 适用 )， 于 是 假定 u 满足 (8.3) 并 令 MERE u, 的 最 大 值 . $ 
U,=M. 因为 (8.3) 中 的 系数 p,，,. 加 起 来 小 于 等 于 1， 所 以 只 有 当 (8. 3) 式 右 边 确 
KERK u (具有 正 系数 ) 都 等 于 M 而 且 它 们 的 系数 之 和 为 1 才 可 能 使 (8. 3) AX 
z =r KoL. Pru =M, 用 类 似 的 推论 可 知 : u, Sry Se Su 5M. 然而 ， 当 
=I, (8.3) 式 中 的 系数 p,_, 之 和 小 于 1， 所 以 M=0. 

由 此 推 知 ，(8. 2) 有 惟一 解 ， 从 而 问题 得 解 . 引进 下 列 边界 条 件 来 简化 (8. 2) 
的 书写 : 


u, =l 当 r0, 
u, = 0 当 ra. (8. 4) 
于 是 (8.2) 可 写 为 下 述 形 式 : 
U, = HU, Pı’ (8. 5) 


此 处 之 求 和 跑 遍 一 切 rz. (Hara, A 8.4) 中 的 第 二 个 条 件 ， 它 对 〈8.5) 中 的 和 
没有 贡献 Nbr <0, 由 (8.4) 中 的 第 一 个 条 件 ， 其 贡献 加 到 r 中 去 了 .J 
对 于 很 大 的 a， 直接 解 a 一 1 个 线性 方程 式 是 很 麻烦 的 ， 而 用 类 似 于 第 2 节 中 使 
用 的 特 解 的 方法 较 好 ， 当 概率 分 布 Cp, 的 正 项 数 相对 小 时 此 法 可 行 ， 假定 只 有 当 
一 vy Kk Spit, pp 才 不 为 0， 那 么 ， 在 正方 向 和 和 负 方 向 的 可 能 的 最 大 既 度 分 别 为 K 和 
v ， 特 征 方 程式 : 
por = (8. 6) 
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ERF uota 阶 的 代数 方程 式 ， 如 果 go 是 (8.6) 的 一 个 根 ， 则 对 一 切 zu. 50 是 
(8.5) 的 一 个 形式 解 ， 但 是 ， 此 解 不 满足 边界 条 件 (8. 4)， 如 果 (8.6) A to PA 
同 的 根 o1 ,oc,…， 则 线性 组 合 
u, = >) Avi (8.7) 
(对 一 切 >) 也 是 (8.5) 的 一 个 形式 解 ， 我 们 必须 适当 选取 常数 A, 以 满足 边界 条 件 . 
对 O<e<a, RAME v+ Sr Satul hc (SAH (8.5) 式 . 因此， 只 要 
Xf r =0,—-1,—-2,0°,-v 十] 和 xz 一 aa 十 1,……a 十 w 一 1 满足 边界 条 件 就 够 了 ， 所 以 
总 共有 nto SAE. tho, 是 〈8. 6) 的 一 个 重 根 ， 我 们 就 南 失 一 个 和 条件， 但 是 在 
WLP. Bol uz 是 另 一 个 形式 解 . 在 任何 一 种 情况 下 ，w 十 "个 边界 条 件 决 定 
T uto MER BM. 
例 (b) 假 定 每 一 步 都 使 该 质点 移 至 四 个 邻近 位 置 之 一 ， 并 邻 p= pis 


pi 一 pp 一， 特征 方程 式 8.6) EH tote 二 4， 为 解 此 方程 式 ， 令 (一 o 十 


go !， 代 入 之 得 十 :二 6， 它 一 方程 式 之 根 为 1 二 2, 一 3， 再 解 1 二 co 十。 得 四 个 根 如 下 : 


-= 4 = 3 git (8. 8) 


0 一 四 一 1 ， di 


因为 ao 是 重 根 ， 所 以 (8. 5) 的 通 解 为 : 
u. =A, tA zt A0; + Avot. (8. 9) 
由 边界 条 件 uy =u) = 1 Alu, =u, =0 推出 系数 A; 的 四 个 线性 方程 式 ， 最 终 得 到 解 : 
z (2z—a) (of — o) alo eor) 


“Tl a al UFD A D a a) (8. 10) 
> 


HIE Se aH. 通常 是 很 麻烦 的 ， 但 是 只 要 求 相当 满意 的 近似 值 ， 就 可 以 用 极 简 
单 的 方法 得 到 之 .首先 考虑 概率 分 布 {pi } 的 均值 为 0 的 情形 . 这 时 o 一 1 是 特征 方程 (8. 6) 的 
二 重 根 ,而 A 十 Bz 是 (8. 5) 的 一 个 形式 解 。 当然， 此 二 常数 A AB 还 不 足以 你 证 yy 十 uv 个 边 
界 条 件 (8. 4) 成 立 ， 然 而 ， 如 果 我 们 这 样 定 A AB: A 二 Bz 一 0 或 1 由 z=a 十 /一 1 或 z 二 0 
而 定 ， 则 对 一 切 x <08 A 十 Bx Sl, WW aSr < 之 a 十 uw 有 A 十 Bx 之 0， 所 以 ， 把 边界 条 件 
(8.4) 中 的 等 号 换 成 大 于 等 于 ， 则 A 十 Bz 满足 换 后 的 新 边界 条 件 . 因此 ， 差 A 十 Bz 一 wu 是 其 
有 非 负 边界 值 的 (8. 5) 的 一 个 形式 解 ， 从 而 At+Be-u. 0. Bh. AA AB AP RADA 
确定 : A 十 Bz 二 0 或 1 由 z==a 或 z 二 一 u 十 1 而 定 ， 则 可 得 出 wu 的 下 界 . 因此 


az atu—z—l 
< wi ~ + ， 
ato StS atul (8. 11) 


如 果 a 相对 于 十 v 而 言 很 大 ， 则 此 估 值 是 很 好 的 《当然 ，wuw 守 (1 一 z/a) 是 较 好 的 估 值 ， 但 霖 
给 出 误差 限 ). | 
其 次 ， 考 虑 概率 分 布 {pi} 的 均值 不 为 0 的 一 般 情 形 . 这 时 ， 特 征 方程 〈8. 6) ARR o= 
1， 当 go->0 及 一 co 时 ，(8. 6) 式 的 左边 趋 于 co， 当 o 为 正 时 ， 曲 线 y= pot HEH R 
数 ， 又 因为 它 与 直线 y=1 交 于 os 二 1， 故 必定 至 少 还 有 一 个 交点 所以， 特征 方程 式 (8.6) 
有 两 个 正 根 1 和 oy， 如 前 一 样 ， 易 见 ，A 十 Bo 是 方程 式 (8. 5) 的 一 个 形式 解 ， 从 而 可 将 前 
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述 推理 用 之 为 此 解 ， 因 此 ,在 目前 的 情况 下 有 : 
ai — oi 


ote! _ 
g orl"! Lu LKE, (8. 12) 


te 一 |] 


总 之 ， 我 们 有 下 述 的 定理 : 

定理 如果 {p) 的 均值 为 0， 则 破产 问题 的 解 满 足 不 等 式 (8.11; 如 果 {pi} 的 均值 不 为 
0， 则 此 解 满足 不 等 式 (8.12). HP 为 (8.6) 的 不 等 于 1 的 惟一 的 正 根 ， Mu bv PAA 
pi 关 0 的 最 大 与 最 小 的 下 标 . 

令 m= Skp. 为 一 次 试验 中 的 赢利 的 期 望 值 (或 一 步 的 长 度 的 期 望 值 ). 由 (8.6) BOL: 
W m0, ol; 而 m 记 0 时 , a<l. Gar-c~, HEATH: 与 具有 无 穷 赌 本 的 富 
傈 进行 博弈 时 ， 最 终 破 产 的 概率 为 ] 的 充分 必要 条 件 是 m<O. 

博弈 的 持续 时 间 ， 可 用 类 似 的 方法 来 进行 讨论 〈 见 习题 9). 


14.9 J 题 


tE: 习题 1 一 4 只 需 参 考 第 2 节 ， 而 且 并 不 需要 计算 . 

lL 在 一 个 从 原点 出 发 的 随机 徘徊 中 ， 找 出 质点 在 到 达 一 6 <0 以 前 到 达 a > 0 的 概 涂 . 

2. 用 第 2 节 的 记号 与 概念 ， 证 明 下 列 诸 命题 . 
(a) 在 一 个 由 原点 出 发 的 随机 徘徊 中 ， 在 返回 原点 以 前 到 达 点 a >O 的 概率 为 如 1 一 9 )， 
(b) 在 一 个 由 a >0 出 发 的 随机 徘徊 中 ， 在 返回 出 发 点 以 前 到 达 原 点 的 概率 为 gqge-1. 

3. 设 g 宇 p. 由 上 一 问题 证 明 :在 一 个 由 原点 出 发 的 随机 徘徊 中 ,在 第 一 次 返回 原点 以 前 ,访问 
点 a 之 0 的 次 数 服 从 具有 公 比 1 一 gg-: 的 几何 分 布 . (为 什么 4 之 p 的 条 件 是 必要 的 ?) 

4. 用 前 面 两 个 问题 证 明定 理 !: 在 第 一 次 返回 原点 以 前 ， 访问 点 4 全 0 的 次 数 的 期 望 ， 当 p 
<q 时 为 (六 /9)” má p=q 时 为 1. 

5. 修改 随机 徘徊 的 模型 如 下 : 假定 质点 向 右 移动 一 步 、 向 左 移动 一 步 和 原 地 不 动 的 概率 分 
Aa, BMY (a 十 8 十 Y 二 1). (用 博弈 中 的 术语 来 说 ， 结 果 可 能 是 平局 . ) 考虑 第 2、3 两 
节 中 破产 问题 . 


6 考虑 第 2、 第 3 节 中 的 破产 问题 当 原 点 置 有 弹性 壁 的 场合 《如 第 1 节 所 定义 )， 和 破产 概率 
(吸收 到 原点 ) 的 差分 方程 和 持续 时 间 的 期 望都 是 一 样 的 ， 但 具有 新 的 边界 条 件 . 

7. 一 个 质点 每 移动 一 次 ， 或 则 以 概率 p 向 右 移 动 二 个 单位 长 ; 或 则 以 概率 q 同 左 移动 一 个 
单位 长 (p 十 g 二 1)， 如 果 出 发 的 位 置 是 0、 试 求 该 质点 迟早 要 到 达 原 点 的 概率 q. 


(这 是 一 个 “对 于 拥有 无 穷 赌 本 的 富 癸 ”的 赌 徒 的 破产 问题 . ) 
提示 类 似 于 (2.1)， 导 出 一 个 有 特 解 9. 一 1 和 两 个 形 如 x 的 特 解 的 三 次 方程 ， 此 处 4 
满足 一 个 二 次 方程 . 


1. 此 结果 用 公平 博弈 的 语言 来 表达 更 为 精彩 ， 一 个 均匀 的 硬币 一 直 扔 到 第 一 次 出 现 正 、 反 面 的 累积 次 
数 相等 时 为 止 ， 赌 徒 每 当 出 现 正面 的 累积 次 数 比 出 现 反面 的 累计 次 数 多 mit, BOT 1 元 ， 而 
“公平 的 入 场 费 ”是 ]， 与 加 无 关 . 

不 同 的 (初等 ) 证 明 ， 见 第 二 卷 第 12. 10 PYM 1 一 2. 
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10. 


Ii. 
12. 


13. 


14. 


15. 


(3 FR’). WER: 在 一 个 伯 努 利 试验 序列 中 ， 失 败 的 累积 次 数 两 次 超过 成 功 的 累积 次 数 
迟早 要 出 现 的 概率 为 q. 

(44 p= 二 g 时， 此 概率 为 (V5 一 1)/2. ] 

在 第 8 节 的 广义 的 随机 徘徊 中 ， 令 [类似 于 8D] o5 pi F parie t porz t HS 
d, 是 此 随机 徘徊 恰巧 持续 ” 步 的 概率 ， 试 证 对 nal 有 : 


dent = Sd nme ’ 
da —=Ty F Oz. 
并 由 些 证明 母 函 数 d,(o) = dj dena” 是 下 列 线性 方程 组 的 解 


od, (s) 一 Sa. (o) D = — Vz -F pe. 
微分 之 ， 可 推出 平均 持续 时 间 e, 是 下 列 方程 式 之 解 ， 


ê, — So = |. 
在 一 个 在 点 0 和 a 都 置 有 吸收 壁 的 初始 位 置 为 的 随机 徘徊 中 ， 令 wn DER n FEI 
点 处 于 的 概率 ， 找 出 决定 zw,(Cz) 的 差分 方程 组 和 边界 条 件 . 
( 续 上 题 )， 对 具有 两 个 反射 壁 《〈 即 县 有 0=1 的 弹性 壁 ) 的 情形 ， 修 正 其 边界 条 件 . 
在 一 个 具有 可 能 位 置 为 1,2,…,a 一 1 OR Cp=—q 随机 徘徊 中 ,在 9 置 有 吸收 壁 而 在 
另 -一 端点 置 有 反射 壁 ， 找 出 被 0 点 吸收 的 等 待 时 间 的 母 函 数 , 
初 达 概率 的 另 一 形式 ， 在 破产 概率 的 显示 表达 式 6.7 P, Sarco, 试 证 其 结 打 为 


] 
nee pe P? grrr cos” na ° singg * sinrxz dz. 


因此 ， 此 公式 必须 等 价 于 (4. 14)， 用 证 明 其 相应 的 母 画 数 和 边界 条 件 都 是 一 样 的 办 法 ， 
来 验证 上 述 事 实 ， 
( 续 上 题 )， 扩 散 中 的 初 达 ,证明 : 按 第 6 节 描 述 的 方法 取 极 限 ， 将 把 上 一 问题 中 的 ten A) 
公式 化 为 表示 式 ， 
z e (eta) 2D) ， 

J 2xDt* 
此 式 是 一 个 从 点 z 之 0 开始 的 扩散 被 ORISA RB. Spo ht, aR 
等 价 于 第 3.7 节 的 极限 定理 3. 
tE AT SOMMYP, v,,% (6.1) 式 中 的 概率 ， 即 一 个 从 原点 开始 的 无 限制 的 随机 
We, BEER n FABER MER 第 3. 1 节 的 反射 原理 导出 另 一 种 处 理 方法 . 


RAJE 议 p= => ， 考 虚 在 原点 具有 吸收 壁 ， 初 始 位 置 为 z >0 的 《0，oo》 中 的 随机 


, 此 问题 是 由 纽曼 (Newman) 提出 来 的 .其 解 是 前 一 问题 〈 在 第 二 版 ) 的 简单 推论 ， 读 者 可 试 春 用 
同样 的 方法 处 理 代 4 以 一 个 有 理 数 的 情形 ， 文 献 【90] 沿 另 一 不 同 路 线 去 解 此 问题 . 

2. 习题 15 一 17 是 映 象 方法 的 例子 ， 项 wz, 对 应 于 无 限制 的 随机 徘徊 中 的 一 个 质点 ， 则 vr+z.n 对 应 于 一 

个 “ 象 点 ” 在 (9.1) h, 我们 发 现 从 不 同位 置 出 发 的 象 点 可 以 从 在 两 个 边界 处 的 重复 反射 得 到 ， 在 

习题 20 一 21 中 ， 我 们 利用 母 函 数 方法 得 到 了 关于 非 对 称 随机 徘徊 的 一 般 结果 ， 在 差分 方程 论 中 ， 点 

是 把 映 象 法 归功 于 开尔文 (L Kelvin)， 在 概率 论文 献 中 ， 等 价 的 反射 原理 通常 认为 是 安 德 烈 

(D. Andre) 的 贡献 . 参见 第 3. 1 节 的 脚注 . 


— 


16. 


17. 


18. 


19. 


20. 


Zi. 


22. 


23. 
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徘徊 ， 设 ten (IP n 步 到 达 位 置 x 0 的 概率 ， 试 证 : ten L) = Uen Dn 
提示: 证 明 对 应 于 4. D 的 差分 方程 组 与 适当 的 边界 条 件 得 以 满足 . | 
( 续 上 题 )， 如 果 在 原点 置 一 反射 壁 ， 则 

Urn (L) = Un Urte—Lne 


( 续 上 题 )， 如 果 随 机 徘徊 限制 在 《0，a) AMA Mma RIC BE, M 
Urn (XL) = > È Ure 2kan  Urte-2han f 9 (9. 1) 


其 中 的 和 是 对 所 有 的 上 《〈 正 的 或 负 的 ) 来 求 的 〈 但 只 有 有 限 项 非 0)， 如 果 两 个 壁 都 是 反射 
的 ， 则 用 加 号 代替 减 号 日 用 xz 十 zx 一 1 Rate Bs (9.1) 仍然 成 立 . 


最 大 坐标 的 分 布 ， 在 一 个 对 称 的 无 限制 的 从 原点 开始 的 随机 徘 物 中 ， 令 M, 是 质点 在 前 > 
步 中 所 处 位 置 的 最 大 的 横 坐 标 ， 利用 习题 15 证 明 : 
P: M, =z} =Unn Urtia. (9. 2) 


HVO) = D vun” (参看 习题 15 前 面 的 注意 )， 证 明 : 24 <t, VaV (5)A2” 
(s); 当 工 宇 0 时 ,V9 二 Vo (OA ， 其 中 心 (与 和 (由 4.8) BR, WI, Vo) 
=(1—A pgs?) 7. 

注意 ; 这 些 关系 可 以 直接 从 下 述 事实 推出 ; 第 4 节 中 曾 证 明 入 (s) 和 (5) 都 是 初 达 时 的 母 
pa aX. 

在 初始 位 置 为 z 且 原点 置 有 吸收 壁 的 并 在 (0,o2) 内 的 随机 徘徊 中 ， 令 un (zx) 是 质点 在 第 nn 
步 到 达 位 置 x BER. FES 


U,(s;Xx) = ST ean (DS. (9. 3) 
n=O 
应 用 习题 19. 证 明 OU. (532) =V- (s) — A3 (SV. 《3s), 由 此 推出 
Urn CL) = Urr. (G9/ PY * Urten: (9.4) 


试 与 习题 15 中 的 结果 比较 ， 并 用 组 合 方法 由 后 者 推出 (9. 4). 
破产 概率 (5.7) 的 另 一 公式 .将 《4.11) 展 成 几何 级 数 ， 由 此 证 明 : 
zn 一 SB ew T SNF Wotan 
k=O q b=] q 


— 


此 处 we. HH (4.14) 定义 的 初 达 概 率 . 
如 果 将 第 6 节 中 取 极 限 的 方法 用 于 前 一 问题 中 所 给 出 的 zz. 的 表达 式 ， 试 证 : 吸收 时 间 的 
概率 密度 为 . 


ceo 


1 on N 7 
e (a2 DD >. (E+ oho ye (£+2 he) QP) 
2nDt° b= 


(提示 : 应 用 二 项 分 布 的 正 态 通 近 . ) 
破产 问题 的 更 新 方法 2， 在 具有 两 个 吸收 壁 的 随机 徘徊 中 ， 令 trn Mul, a BTA 
辟 和 右 壁 的 概率 ， 用 适当 的 解释 证 明 下 列 两 个 方程 式 成 立 : 


1. 此 新 公式 与 极限 形式 (6.15) 的 一 致 性 ， 是 2 函数 论 中 一 个 熟知 的 事实 ， 见 第 二 卷 第 16 OG. 8). 
2. 习题 23 一 25 包含 有 关于 一 维 随机 徘徊 的 一 些 主要 结果 的 独立 的 新 推导 . 
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24. 


25. 


26. 


27. 


28. 


29, 


30. 


31. 


V_.Gs) =U, (syVo Cs) +U?2 (3) V_2 (5) = 

Va- (8) =U (Va (s) tU? Cs) Vo Gs). 
通过 解 此 方程 组 求 U.(s) 来 推导 出 (4. 11)， 
设 ten (OREM 2 HAR UES TES ” 步 未 触及 吸收 壁 以 前 到 达 xz 的 概率 .利用 习题 23 的 符 
号 ， WEH: XP UL Csr) = > un (2) 5" 有 下 述 关 系 

U, Cs; £) =V- (8) —U, (SV (Cs) Us (s)V; Gs). 

(无 需 计算 . ) 
( 续 上 题 ?， 上 一 问题 中 的 母 函 数 UL ssa MWA RRA KBE: 令 UL 5V 
AXi(s) 一 Bi(s)， 并 选择 适当 的 常数 A 和 B， 使 得 当 c= 0 和 zx 一 & 时 边界 条 件 U, Ga) = 
OR. 对 于 反射 壁 ， 边 界 条 件 是 Uo (53.0) =U, (530) FU, Cs; x) =U -1 (53.2). 
用 解 适当 的 差分 方程 式 证 朋 : 


o fz 
Urn = (2m)! gpa gir | cos"t . costrdt, 


并 推出 
_ (ony (2 12 fx costr de. 
V, (s) = (2x) (4 ) awa cont! 
在 三 维 对 称 的 随机 徘徊 中 ， 质 点 经 过 任何 特定 的 直线 + 一 m,y 一 nn 无穷 多 次 的 概率 为 1. 


(提示 ， 参见 习题 5. ) 
在 从 原点 出 发 的 对 称 的 二 维 随 机 徘徊 中 ， 质 点 在 第 n 步 到 达 点 (x,y) 的 概率 为 

(2x) * 2"|" |" (cosa + cosp” © cosza * cosy? da dg. 
证 明 此 公式 ， 并 求 出 三 维 情况 下 的 类 似 公 式 . GR. 检验 此 表达 式 满足 适当 的 差分 方 
程式 . ) 
在 对 称 的 二 维 随机 徘徊 中 , 令 DSe ty 为 在 时 刻 质点 与 原点 距离 的 平方 证明 : 
EÈ) =n. (Aa: 计算 EZ- D). | 
在 对 称 的 坟 维 随机 徘徊 中 ， 质 点 无 穷 多 次 返回 它 先前 曾 占 据 过 的 位 置 的 概率 为 1 AR: 
在 每 一 步 移动 到 新 位 置 的 概率 最 多 为 (2d 一 1)/(24d). | 
证 明 在 第 8 节 中 描述 的 方法 ， 对 破产 的 等 待 时 间 的 母 函数 U.《s) 仍 然 可 以 使 用 . 


1. 原著 此 式 右 边 之 十 号 误 印 为 等 号 . 一 一 译 者 注 


15.1 定 X 


到 现在 为 止 ， 我 们 主要 讨论 如 下 摘 述 的 独立 试验 序列 : H a RE Re E, 
En 构成 的 集合 《有限 或 无 穷 集合 ) ， 对 每 个 E， 有 对 应 的 概率 p;， 样 本 序列 的 概 
率 由 乘法 性 质 来 确定 ， 忆 (CE ,EE Ej, 0} =p, ped, 在 马尔 可 夫 链 理论 中 ， 我 
们 考虑 下 述 最 简单 的 推广 :允许 每 次 试验 的 结果 依赖 〈 仅 依赖 ) 最 邻近 的 前 一 次 试 
验 的 结果 .此 时 结果 E, 不 再 对 应 于 一 个 固定 的 概率 p;， 但 是 对 每 一 对 结果 (E, E,) 
有 -个 条 件 概率 pi: 与 之 对 应 ， 即 已 知 在 某 次 试验 出 现 E 的 条 件 下 ， 下 次 试验 出 现 
E 的 〈 条 件 ) 概率 为 pa. B 加 以 外 ， 我 们 还 必须 给 出 初始 试验 中 出 现 结果 E, 的 概 
Kan 根据 pj 的 意义 ， 对 应 于 二 次 、 三 次 或 四 次 试验 的 样本 序列 的 概率 必须 如 下 
定义 : 

P{(E,,E)}=ap, P{(E,,E,,E,))=apipr, 
P{(E,,E,,E,,E)}=apnppps,. 
一 般 地 ， 
PLE, Ej Ei} = aj, Pii Piit Bi ia Pini. C1. 1) 
此 处 初始 试验 用 0 来 标号 ， 所 以 标号 为 1 的 试验 实 为 第 2 次 试验 . 〈 此 约定 是 方便 的 ， 
上 一 章 中 就 隐 性 地 引进 了 这 一 约定 . ) 

其 实 上 一 章 讨 论 的 几 个 过 程 就 是 马尔 可 夫 链 ， 只 不 过 对 不 同 的 特殊 情况 和 常常 用 
不 同 的 符号 和 模型 来 处 理 圈 了 . 本 章 的 主要 结果 是 某 些 极 限 和 平衡 分 布 的 存在 性 ， 
当然 ， 它 们 与 符号 无 关 而 且 可 用 于 一 切 马 尔 可 夫 链 . 

例 〈a) 随 机 徘徊 ， 直 线 上 的 随机 徘徊 是 一 个 马尔 可 夫 链 ， 不 过 ， 上 自然 地 要 把 其 
可 能 位 置 用 双 无 穷 序 列 … ,一 2 ,一 1,0,1,2,… 来 标 序 ， 用 这 种 标 序 法 ， 只 有 往 邻 近 的 
位 置 转移 才 是 可 能 的 ， 即 是 ， 除 非 二 j 土 1 ,pi 二 0， 用 我 们 现在 的 得 号 ， 我 们 必须 把 
整数 排 成 下 列 简单 的 序列 : 0,1, 一 1,2, 一 2,… ,而 这 会 导致 概率 加 的 公式 不 好 看 .对 
高 维 的 随机 徘徊 ， 此 附注 亦 适 用 .在 实际 计算 中 ， 把 点 用 其 坐标 来 表示 较为 方便 ， 
但 是 ， 此 章 的 符号 能 用 于 理论 癸 客 . 

(b) 分 支 过程 ， 与 其 说 “第 nn 次 试验 的 结果 是 玉 ,”， 在 第 12. 3 节 中 ， 不 如 说 “第 
n 代 的 成 员 有 & 个 ” 否则， 我们 就 考虑 一 个 标准 的 马尔 可 夫 链 ， 其 转移 概率 pj 是 给 
定 的 母 也 数 的 7 次 方 p’(3) 的 5 前 的 系数 ， 

(c) 锥 子 模型 ， 显然， 第 5. 2 节 中 的 几 个 兔子 模型 都 是 马尔 可 夫 链 ， 反 之， 每 一 
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个 马尔 可 夫 链 等 价 于 一 个 如 下 的 钠 子 模型 ， 每 一 个 出 现 的 下 标 用 一 个 钠 子 来 代表 ， 
AMES AR At Aids E ,E;,… 的 球 ， 每 个 钠 的 成 分 是 固定 的 ， 但 各 个 负 的 成 分 
可 以 不 同 ， 在 第 ;个 钠 中 任 取 一 球 取 到 标 有 记号 E, 的 概率 为 pj:， 在 初始 〈( 即 第 0 
次 ) 试验 中 ， 按 概率 分 布 {a ; 任 取 一 个 铅 子 ， 并 从 该 钠 中 随机 地 取出 一 球 ， 如 果 该 
RAIS AE, WE RAS ; PREP RRR, WEKE. 显然 ， 按 这 种 手续 ， 序 列 
(E ,E, =e E ) 的 概率 由 (1.1) 所 给 出 ， 我 们 看 出 ,马尔 可 夫 链 的 概念 并 不 比 灸 
子 模型 更 一 般 ， 但 新 的 符号 系统 更 实际 、 更 直观 . > 

如 果 a 是 初始 (或 第 0 次) 试验 出 现 E, 的 概率 ， 则 必 有 a20 H2a =l. 此 

外 ，E; 出 现 后 ， 下 次 试验 必然 出 现 某 个 EE， 所 以 对 全 部 7 各 k VA 

bpa tpe tpi t'l, pi 20. (1.2) 
我 们 要 证 明 ， 对 于 满足 这 些 条 件 的 任何 数 w 和 p;，(1.1) 式 的 赋 概 法 对 n 十 1 次 试 
验 中 的 样本 空间 的 概率 的 定义 是 合理 的 .因为 由 (1. 1) 定义 的 数 是 非 负 的 ， 所 以 我 
们 只 需 证 明 其 和 为 1， 首 先 固定 部 , 放 ,… ,js-1， 并 将 (1.1) 中 的 数 对 所 有 可 能 的 7， 
求 和 .对 j= 二 jj 利用 (1.2)， 立 刻 发 现 基 和 为 a; p;;…p;,;.. CA, Ba “(1.1) 
形 之 数 不 依 赖 于 n， 又 因为 站 a; 二 1， 故 对 一 切 n 而 言 ， 此 和 等 于 1. 

定义 1.1 形式 上 依赖 于 试验 次 数 ， 但 上 述 论 证 说 明定 义 (1.1) 对 一 切 n 具有 相 容 
性 ， 例 如 ， 为 了 得 到 事件 “ 头 两 次 试验 的 结果 为 (五 ,有 玉 )” 的 概率 ， 我 们 必须 固定 jo = 
放 放 二 而 对 《1.1) 的 概率 对 一 切 可 能 的 j; ,73，…,j RA. 我们 刚才 已 经 证 明 此 和 为 
apa ERR n KARA: 通常 没有 必要 明确 地 指出 试验 的 次 数 ， 事件 (EE， 
E ooo E ) 在 所 有 多 于 7 次 试验 的 样本 空间 中 的 概率 都 是 一 样 的 .关于 独立 试验 到 
列 ， 曾 多 次 指出 ， 从 数学 观点 来 看 ， 最 好 只 引进 惟一 的 无 穷 试验 序列 的 样本 空间 ， 
而 把 有 限 次 试验 的 结果 看 成 是 一 个 无 穷 序列 的 开头 部 分 ， 此 叙述 对 马尔 可 夫 链 也 对 ， 
可 惜 ， 无 穷 多 次 试验 的 样本 空间 超出 了 本 卷 书 只 限于 讨论 的 离散 概率 论 的 范围 . 

综 上 所 述 ， 我 们 的 出 发 点 是 : 

定义 ”可 能 结果 为  ,P ,… 的 一 个 试验 序列 称 之 为 一 个 马尔 可 夫 链 ， 如 采 其 
样本 序列 的 概率 由 (1.1) FEL, AP lap ARSE 在 初始 (或 第 0 次 ) 试验 的 
概率 分 布 ， 而 pj 是 上 次 试验 出 现 F; 的 条 件 下 ， 下 次 试验 出 现 E, 的 条 件 概率 ， 

为 适应 马尔 可 夫 链 的 应 用 ， 把 术语 略 加 改变 ， 把 可 能 结果 OE, 说 成 是 系统 的 可 能 
状态 ， 把 第 nn 次 试验 出 现 结果 FE, 说 成 是 第 n BLA E, RE n HAE. 最 后 ， 称 
>», AHE, 到 EE 的 转移 概率 ， 如 通常 一 样 ， 我 们 设想 试验 是 按 一 致 的 速度 进行 的 ， 
所 以 步 数 可 视 为 时 间 参 数 . 


1. 这 不 是 标准 术语 ， 此 处 考虑 的 只 是 一 类 特殊 的 马尔 可 夫 链 ， 严 格 地 说 ， 此 处 及 以 后 诸 节 ， 术 请 马尔 
可 夫 链 前 应 加 上 定语 “具有 平稳 转移 概率 ” 实际 上 ， 一 般 的 马尔 可 夫 链 很 少 研究 ， 其 定义 将 在 第 
13 节 中 给 出 ， 那 里 的 马尔 可 夫 性 将 联系 一 般 的 随机 过 程 来 讨论 ， 在 那里 ， 读 者 还 会 找到 不 是 马尔 
可 夫 链 的 相依 的 试验 序列 的 例子 . 
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转移 概率 可 以 排 成 一 个 转移 概率 矩阵 : 


Pu Pe Pra 
Pa Pee Pz 


P= | Pi Pz Pa °° (1. 3) 


此 处 第 1 个 下 标 代 表 行 ， 而 第 2 个 代表 列 ， BR, PH-TAB, KRIE Am H 
每 行 之 和 为 1. 这 种 矩阵 (有限 或 无 穷 ) 称 为 随机 矩阵， 每 一 个 随机 纸 阵 都 可 作为 
转移 概率 矩阵 ， 连 同 初 始 分 布 {a )}， 它 完全 决定 了 一 个 具有 状态 EE HEAR 
TKH. 

在 某 些 特殊 场合 ， 把 状态 数 从 0 开始 编号 比 从 1 开始 好 . 这 时 要 把 第 0 行 和 第 0 
列 添加 到 P 中 去 . 

APM. 古典 文献 中 用 饶 子 模型 处 理 的 各 种 问题 ， 现 在 都 以 马 示 可 夫 链 的 形式 出 现 ， 
日 是 ， 其 原始 方法 却 完全 不 同 ， 进 一 步 地 ， 许 多 翁 子 模型 由 于 其 具有 后 效 而 有 不 同 的 特性 ， 
而 且 这 些 本 质 差异 并 不 完全 了 解 . 事实 上 ,在 马尔 可 夫 的 奠基 性 的 工作 发 表 很 人 人 以后， 这 毕 
东西 还 含混 不 清 ， 马 尔 可 夫 (A. A. Markov, 1856—1922) 建立 了 有 限 马尔 可 夫 链 的 基础 但 
其 具体 应 用 仍然 大 量 地 局 限 在 洗 牌 和 语言 学 等 问题 上 ， 而 理论 处 理 往往 应 用 代数 方法 ， 此 类 
方法 在 下 一 章 中 将 要 描述 ， 弗 雷 敬 (M. Frechet) 曾 发 表 专 论 综述 这 一 方法 “站 

具有 无 穷 多 个 状态 的 马尔 可 夫 链 的 理论 是 科 尔 莫 艾 罗 夫 引 进 的 ， 本 书 第 一 版 曾 用 新 方 
法 讲述 这 一 理论 使 之 易于 被 广大 的 公众 接近 ， 并 引起 人 们 对 各 种 可 能 的 应 用 的 关注 ,现在 与 
尔 可 夫 链 已 经 变 成 概率 论 中 的 标准 的 专题 ， 并 成 为 许多 应 用 的 熟知 的 工具 ， 关 于 它 的 更 多 的 
当今 的 理论 发 展 ， 可 参见 第 11、12 地 的 附注 ， 


15.2 BOM Bl F 


(关于 在 古典 的 洗 牌 问题 中 的 应 用 ， 请 参见 第 10 YD 
(a) 当 可 能 状态 只 有 已, E: 时 ， 转 移 概率 矩阵 必 是 下 述 形式 : 


| 
P=) H Ead 

这 种 链 可 以 由 下 述 形式 的 实验 来 生成 ， 一 个 质点 在 r- 轴 上 按 下 述 方法 运动 : 其 绝对 
速度 保持 常数 ， 但 其 方向 可 以 相反 ， 如 果 质 点 向 正方 向 移动 ， 则 说 系统 处 于 状态 E, 
如 果 向 左 移动 ， 则 说 系统 处 于 状态 E. p 是 当 质 点 向 右 移 动 时 改变 其 方向 的 概率 ，a 
是 当 质 点 向 左 移动 时 改变 其 方向 的 概率 ， [此 链 在 第 16. 2 WH Cad 中 有 完整 的 
分 析 . | 

(b) 具 有 吸收 壁 的 随机 徘徊 ， 令 可 能 状态 为 忆 ,El，… ,上 ,， 考 虑 其 转移 概率 和 矩阵; 
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1 0 0 0 0 0 0 

q 0 p 9 0 0 0 

0 g 0 p 0 0 0 
P= 

0 0 0 0 + g 0 p 

0 0 0 0 0 0 1 


从 每 一 个 “内 ”状态 E, Epa HE, EA SB Sa AA I] Ze SR Be AB eT BY 
(分 别 具 有 转移 概率 pu =p 和 pi; 1 二 9). 然 而， 对 状态 EE ME, KUL, AACR F 
其 他 任何 状态 ， 系统 可 以 由 一 个 状态 转移 到 其 他 状态 , 但 一 旦 到 达 E RE. WRA 
永远 固定 在 原状 态 上 ， 显 然 ， 此 马尔 可 夫 链 ， 与 上 一 章 讨 论 的 在 0 和 pp 具有 吸收 壁 的 
随机 徘徊 模型 只 有 术语 上 的 差异 而 已 ， 那 里 的 随机 徘徊 从 区 间 中 国定 的 点 xz 出 发 . 
用 马尔 可 夫 链 的 术语 来 说 ， 这 意味 着 选择 下 列 初始 分 布 ，a. 王 1《 从 而 a, =0 对 一 切 
rAz). 随机 地 选取 一 个 初始 状态 ， 对 应 于 初始 分 布 为 a 二 1/ lp 十 1)， 

(c) 反 射 壁 ， 上 一 个 例子 的 有 趣 的 变化 是 : 链 的 可 能 状态 改 为 E t E FARLEY 


q p0 0 0 0 0 

q 0 p 0 0 0 0 

O q 0 p 0O 0 0 
P= 

0 0 0 0 ++ q 0 p 

0 0 0 0 = 0 q p 


此 链 可 以 用 博弈 的 语言 来 解释 ， 两 个 赔 徒 进行 博弈， 每 次 赌注 一 元 ， 而 且 约定 当 一 
个 财 徒 输 掉 他 所 有 的 赔本 后 ， 对 手 退回 他 一 元 ， 这 样 ， 博 弈 可 以 一 直 继 续 下 去 ， 候 
定 两 个 财 徒 共有 o 十 1 元 峙 本， 并 说 系统 处 于 状态 E.， 如 果 此 二 财 徒 分 别 拥有 元 和 
0 十 1 一 元 本 金 ， 其 转移 概率 矩阵 就 是 上 面 的 P， 用 第 14. 1 节 中 引进 的 术语 来 说 ， 上 
面 的 链 就 是 一 个 在 点 方 和 十 坟 具 有 反射 壁 的 随机 徘徊 .具有 弹性 壁 的 随机 徘徊 可 以 
用 类 似 的 方法 处 理 ， 具 有 弹性 壁 的 链 的 完整 的 分 析 ， 可 在 第 16. 3 节 找到 ，[ 亦 见 例 
(7.3).] 

(d) 循 环 随 机 徘徊 ， 仍 设 可 能 状态 为 E , 马 ，…, 忆 ,但 对 它们 循环 标 序 ， 从 而 E, 有 
邻 域 下 ,和 瓦 ， 如 前 ， 仍 设 此 系统 总 是 往 右 或 左 邻 域 运动 ， 则 矩阵 王 的 第 上 行为 (0， 
p,0,0,.*,0,9)， 而 最 后 一 行为 (p,0,0,0,'…,0,9,0)， 其 余 各 行 与 例 (b) 中 的 一 样 . 

更 _- 般 地 ， 可 以 允许 在 任何 两 个 状态 之 间 转 移 ， 令 % ,9 ，,…,9,-1 分 别 是 停止 不 
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动 或 回 右 移动 1，2，…，p 一 1 个 单位 的 概率 〈 此 处 ， 向 右 移动 有 个 单位 与 向 左 移动 
co 一 & 个 单位 是 一 样 的 )， 则 P 是 循环 矩阵 . 


qdo qı q2 °" d2 doi 

Jo- ı do dd t G3 qoe 

p= qo- 2 do- l do s.s Go—4 dr 一 3 
qi q2 d3 "t (Qo!l do 


对 此 链 的 完整 分 析 ， 请 参见 第 16. 2 节 例 Cd). 

OFRE R RA (Ehrenfest) 模型 . 我们 再 一 次 考虑 具有 po 十 1 个 状态 Eo, 
户 ,…,, 且 只 可 能 问 右 或 向 左 邻 域 转移 的 链 ， 此 时 我 们 令 biji 二 1 一 ]/p 及 pj.j 一 
]/p， 从 而 


O 1 Q 
o` 0 l—p ` 
0 20 ` Q 1 一 20 ` 
P= . 
0 0 0 0 O o` 
0 0 O $ :+*» 1 Q 


此 链 具 有 两 个 有 趣 的 物理 解释 .为 了 讨论 统计 力学 中 的 各 种 循环 问题 ， 埃 伦 费 
斯 特 : 考虑 了 一 个 想像 的 包子 实验 ，o 个 分 子 分 布 在 两 个 容器 A 和 B 中 每 一 次 试 
验 ， 随 机 地 选取 一 个 分 子 由 其 原来 所 在 的 容器 转 到 另 一 容器 ， 系 统 的 状态 由 A 中 的 
分 子 的 个 数 来 决定 假定 在 某 一 时 刻 恰 有 个 分 子 在 容器 A 中 ， 在 下 一 次 试验 中 ， 
系统 进入 状态 E ME. MOF A 中 选 出 或 B 中 选 出 而 定 ， 相 应 的 概率 为 k/p 或 
(po 一 k)/o， 因 此 ， 此 链 描 述 了 埃 伦 费 斯 特 的 实验 ， 然 而 ， 此 链 也 可 解释 为 在 中 心力 作 
用 下 的 扩散 ， 即 一 个 向 右 移动 的 概率 随 质 点 位 置 而 变化 的 随机 徘徊 ， 当 x==j 时 ， 若 
j 达 op/2， 则 质点 向 右 移 的 可 能 性 大 ， 若 jp/2， 则 质点 向 左 移 的 可 能 性 大 ， 这 意味 
着 : 有 一 种 与 距离 成 正比 增加 的 吸引 弹性 力 . [ 埃 伦 费 斯 特 模型 在 第 5. 2 节 例 Cc) 中 
曾经 讨论 过 ， 还 可 见 第 7 节 例 (d) 和 习题 12. | 

(人 ) 扩 散 的 伯 努 利 - 拉 普 拉 斯 模型 : ， 对 两 个 容器 内 的 不 可 压缩 的 液体 的 流动 ， 伯 
经 利 曾经 对 埃 伦 费 斯 特 模型 作 过 概率 类 比 ， 现 在 假定 有 2p 个 质点 ， 其 中 有 p 个 白 的 
也 有 4 个 黑 的 ， 由 于 假定 了 质点 代表 不 可 压缩 的 液体 ， 所 以 其 密度 不 变 ， 从 而 每 个 铅 


| 一 


. 参见 文献 £93], [94]. L95], L96]. 
TR, UR A 1769 年 提出 的 ，1782 年 马尔 费 梯 (Malfatti) 评论 过 ，1812 年 拉 
普 拉 斯 分 析 过 ， 参 见 197]. 
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FP AS PS RURAL ARET PRA ek SAS GAA T he H 
还 有 ok PRIA, TI 2 PEP PIAA o 一 个 白质 点 ,上 有 个 黑 质 点 )， 则 说 系统 处 
于 状态 &， 每 一 次 试验 从 每 一 个 炙 子 中 各 取 一 质点 互 换 . 于 是 转移 概率 为 

p= (三) 9 pua = (EP) p, 一 2 D (2.1) 


2 


0 
而 当 |7 一 &| >l Gab 7 一 0,……o) 时 pp =O. [对 于 稳定 的 状态 分 布 ， 见 第 7 Hl 
(e) ， 对 于 模型 的 推广 ， 见 习题 10. | 

(g) 随 机 地 投球 ， 考虑 一 个 独立 试验 序列 ， 每 次 试验 把 一 个 球 随机 地 放 人 给 定 的 
ot & RAET) 的 一 个 盒 中 ， 如 果 恰 有 个 盒 被 占 ， 则 说 系统 处 于 状态 E AA 
定 一 个 具有 状态 E, setts E, 的 马尔 可 夫 链 ， 其 转移 概率 如 下 : 

Pi =f ’ P;.j+ -> ， (2.2) 

当然 ， XT 7 AIR 的 其 他 组 合 ， VAR Py 7O. 如 果 开 始 时 所 有 的 盒子 都 是 空 的 ， 则 分 布 
{a,} 确 定 如 下 : a=1,q,=0 对 一 切 ROO 成 立 . [此 链 还 要 在 第 16. 2 节 例 Ce) 中 作 
进一步 的 分 析 ， 随 机 投球 曾 用 不 同 的 观点 在 第 2. 5 节 和 第 4. 2 节 中 处 理 过 . ] 

(细胞 焉 传 学 中 的 一 个 例子 。 具有 状态 Fy ttt En 和 转移 概率 

= 2] /2N—2) 2N 
bw = (2) UN E) (2. 3) 

的 马尔 可 夫 链 会 出 现在 生物 学 的 问题 中 ， 它 可 粗略 地 描述 如 下 ， 某 有 机 体 中 每 一 个 
细胞 中 包含 N 个 质点 ， 一 些 是 A 型 的 另 一 些 是 B 型 的 . 如果 某 细胞 恰 含 7 个 A 型 的 
质点 ， 则 说 此 细胞 处 于 状态 E， 下 一 代 细 胞 由 细胞 分 裂 所 产生 ， 但 是 在 分 裂 以 前 ， 
细胞 进行 自我 复制 ， 而 下 一 代 细 胞 继承 的 N 个 质点 随机 地 来 自 上 一 代 细 胞 的 27 个 A 
型 质点 和 2N 一 2; 个 B 型 质点 ， 因 此 ， 下 一 代 细 胞 处 于 状态 E, 的 概率 服从 超 几 何 分 
fa (2.3). 

将 在 第 8 节 例 (b) 中 证 明 ， 在 充分 多 代 以 后 ， 所 有 的 细胞 都 将 处 于 并 一 直 停 


留 在 )“ 纯 ”状态 或 Ev， 这 两 个 偶然 事件 的 概率 分 别 为 1 一 志和 闪 ， 此 处 E EH 


(iD 总 体 遗 传 学 中 的 一 个 例子 : . 考虑 一 个 代 代 相传 的 总 体 〈 例 如 庄稼 地 里 的 杆 
株 ) ， 在 每 一 代 中 都 选取 N 个 植株 ， 从 而 总 体 的 大 小 NN 保持 为 常数 ， 一 个 特殊 的 基 
因 取 A 与 a 两 种 形式 从 而 有 2N 个 代表 ， 如 果 在 第 nn 代 中 人 A 出 现 j 次 而 a 出 现 2N 一 ] 
次 ， 则 说 此 总 体 处 于 状态 E,(O<j<2N). 假定 交配 是 随机 的 ， 则 下 一 代 的 成 分 由 
2N 次 伯 努 利 试验 所 决定 ， 其 中 A 型 基因 出 现 的 概率 为 j/2N， 因此 我 们 得 到 一 个 其 


jrek 


. 参见 文献 [98]， 此 作者 本 质 上 用 了 第 16 章 的 方法 ， 但 并 未 注意 到 马尔 可 夫 链 、 我 们 的 叙述 ， 在 数 
学 上 是 等 价 的 ， 但 在 生物 方面 过 分 简单 化 了 . 

Banai CS. Wright) 曾 用 不 同 的 方法 讨论 过 这 个 问题 ， 用 马尔 可 夫 方 法 来 阐述 此 问题 的 厦 己 
zæ (G. Malécot)， 见 L99). 
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有 下 述 转移 概率 的 马尔 可 夫 链 ， 
oN - k - \ IN—k 
Pu = ( h Gi) (1—3) . (2.4) 


在 状态 E 和 Ev， 所 有 基因 都 是 同一 种 类 型 的 ， 从 此 二 状态 不 能 转移 “流出 ) 到 其 
他 状态 . 〈 称 它们 为 纯 合子 体 的 . ) 在 第 8 PA Cb) 中 将 要 证 明 : 总 体 最 终 会 固定 到 
E, 或 Esr 中 的 一 个 〈 纯 合子 体 的 状态， 如 果 总 体 从 初始 状态 E 出 发 ， 对 应 的 概率 
为 1 一 7/ N) 17/ (2N). 

此 模型 可 以 修改 以 说 明 变 异 和 基因 的 优选 . 

(j) 一 个 繁殖 问题 ， 在 生物 遗传 控制 实验 中 ， 对 同胞 兄妹 进行 交配 . 在 他 们 的 直 
接 后 代 中 再 随机 地 选取 两 个 异性 个 体 进 行 交配 .此 过 程 如 此 无 限 地 进行 下 去 . 当 每 
一 个 父 (或 母 ) 有 三 种 遗传 型 AA, Aa,aa 时 ， 我 们 必须 区 分 父母 双方 的 下 述 六 种 组 
A., E,=AAXAA,E, =AA®X Aa, E, = AaX Aa, E, = Aa X aa, E; = aa X aa, E = AA X 
aa， 应 用 第 5. 5 节 中 的 法 则 ， 易 见 此 时 的 转移 概率 和 矩阵 为 : 


1 0 0 0 0 0 
1 1 1 

lp 3 7 9 0 0 
1 1 1 1 1 1 
16 4 4 4 16 8 

1 1 1 

0 0 7 > FG 0 
0 0 0 0 1 0 


0 1 0 0 0J. 
[在 习题 4 中 还 将 讨论 ， 第 16. 4 节 例 〈(b〉 中 将 给 出 完整 的 论述 . | 
(k) 循环 事件 与 剩余 等 待 时 间 ， 具 有 状态 E Ey y+ PPR A EAE F 


h fo fh f 
1 0 0 0 
0 1 0 0 
P=|0 0 1 0 
0 0 0 1 


的 链 曾 反复 地 用 作 例证 ， 概 率 f; 除了 其 和 为 1 以 外 可 以 任意 ， 为 了 使 过 程 更 形象 化 ， 
假定 它 从 初始 状态 E, 出 发 . 如 果 第 一 步 到 达 Eris 那么 系统 接连 经 过 Ez-2 s Ert" 
于 第 & 步 才 返 回 E, ， 此 时 过 程 义 完全 重新 开始 ， 因 此 ， 接 连 返 回 E 构成 一 个 循环 时 
间 具 有 分 布 {f;) 的 循环 事件 8. 此 系统 在 任 一 时 刻 所 处 的 状态 由 下 一 次 经 过 E 的 等 
待 时 间 所 决定 ， 在 循环 事件 的 许多 具体 的 实例 中 ， 下 一 次 出 现 的 等 待 时 间 依 赖 于 将 
来 的 发 展 ， 所 以 ， 马 尔 可 夫 链 没有 操作 意义 ， 但是， 当 我 们 能 够 想像 : 每 一 次 & 的 出 
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现 ， 同 时 有 一 个 其 结果 决定 下 一 次 等 待 时 间 的 长 度 的 随机 实验 时 ， 链 还 是 有 意义 的 ， 
这 种 情形 虽然 条 件 苛刻 ， 但 在 实践 中 还 是 时 有 发 生 的 . 例如 ， 在 自我 更 新 集合 的 理 
论 中 [第 13. 10 节 例 (d)]， 某 些 时 候 假定 菜 设备 新 沪 置 的 零件 的 寿命 依赖 于 此 零件 
的 选取 ， 但 是 一 旦 选 定 ， 寿 命 就 被 完全 决定 了 .再 如 ， 在 排队 论 或 电话 的 中 继 线 中 ， 
顾客 的 接连 的 离 去 常常 构成 循环 事件 .现在 假定 有 许多 类 型 的 顾客 ， 但 每 一 失 顾 客 
要 求 服 务 的 时 间 长 度 是 已 知 的 ， 两 个 接着 离开 的 顾客 之 间 的 等 待 时 间 ， 完 全 决定 于 
他 们 加 入 等 待 队 列 的 时 刻 ，[ 见 第 7 节 例 Ce. J 

(]) 与 循环 事件 相关 联 的 另 一 个 链 ， 再 考虑 一 个 具有 状态 ELE. MB 
阵 
q A 0 0 0 
gq 0 p 0 0 
g 0 0 p 0 
q 0 0 0 fı 


的 链 ， 其 中 入 十 % 王 1， 为 了 形象 的 描述 ， 我 们 把 E RRA-TASH “AAR”. 当 
一 个 系统 到 达 上 & 岁 时 ， 它 以 概率 pi 继续 存活 而 以 概率 ge- 返 老 还 童 并 从 0 岁 开始 新 
生活 ， 接 连通 过 状态 E 也 构成 一 个 循环 事件 ， 而 且 循 环 时 间 等 于 & 的 概率 由 磁 积 
Pi Pette Pe 1% 所 给 出 . 可 以 用 此 法 取 pi， 以 使 指定 的 分 布 (fe 为 循环 时 间 的 分 布 : 
只 需 令 g% 王 六， 则 q; 二 ff2/pP1， 等 等 ,一 般 地 取 
p= (2.9) 

用 这 种 方法 ， 任 何 一 个 具有 循环 时 间 分 布 {f ) 的 循环 事件 & ， 对 应 着 一 个 由 (2.5) 所 
决定 的 转移 概率 矩阵 为 王 的 马尔 可 夫 链 ， 系 统 在 第 ”次 试验 处 于 状态 E 的 充分 必要 条 
件 是 : 8 最 后 一 次 出 现在 第 "一 & 试验 〈 此 处 R 一 0,1,2…)， 此 状态 经 常 称 作 “耗费 的 
等 待 时间 ” [在 第 5 节 例 (b)、 第 7 节 例 (f) 和 第 8 节 例 Co 中 还 将 继续 讨论 . J 

(m) 成 功 连贯 ， 作 为 上 一 个 例子 的 特殊 情形 ， 考 虑 一 个 伯 努 利 试验 序列 ， 约 定 : 
系统 在 第 2 次 试验 处 于 状态 & 的 充分 必要 条 件 是 最 后 -次 失败 出 现在 第 n 一 有 次 试验 . 
此 处 ==0,1,2,…, 而 且 约 定 第 0 次 试验 总 是 失败 ， 换 名 话说， 指标 上 等 于 终止 在 第 
次 试验 的 不 间断 的 成 功 区 段 的 长 度 ， 其 转移 概率 如 上 例 ， 只 不 过 对 一 切 的 都 有 
pe = BN q 5q. 


15.3 高 阶 转移 概率 


A p? Aiea Bit n HE, 转移 到 区 ORR, MARU. PP 是 初始 状态 为 上 ; 
在 第 nn A E, 的 条 件 概率 ， 这 是 从 E 开始 而 终于 EE 的 一 切 长 为 n 的 可 能 路 往 
EE,…E，E 的 概率 的 和 .特别 地 ，pi 二 Pp， 和 
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DP = Dd) Pabu- (3.1) 
用 归纳 法 ， 可 得 一 般 的 递归 公式 ， | 
DEP = D pap, (3. 2) 
进一步 ， 对 m 作 归纳 法 ， 得 到 基本 恒等式 ; 
pir” = Dp pe. (3. 3) 
(这 是 查 普 曼 - 科 尔 莫 艾 罗 夫 恒等式 的 特殊 情形 )、 它 反映 了 一 个 简单 的 事实 ;最初 m 
FH E, 转移 到 一 个 中 间 状 态 玉 ,， 而 从 EL 到 Ei 的 子 序列 的 概率 不 依赖 到 达 , 的 方 
式 ! . 


如 像 把 pj, 排 成 矩阵 一 样 ， 我 们 把 pi? HER PEER AAA P itz. AA, 
(3.2) WBE: PRIOR pir? AAFP 的 第 ; 行 的 元 素 乘 以 P" 的 第 & 列 的 对 应 
的 元 素 的 乘积 全 部 加 起 来 而 得 ， 此 运算 称 为 矩阵 P 和 P" 的 行 到 列 的 习 法 ， 并 用 符号 
表示 为 如 下 列 方程 式 : PPP". ZERRI P AP 的 n KA, JEA (3. 3) 
代表 著名 的 规律 P= PP", 

为 了 使 (3.3) 对 一 切 no 都 对 ， 我 们 自然 地 要 定义 pj? 如 下 : py = 1, Pe 一 
(对 一 切 je). 

Gl 〈a) 独 立 试验 序列 ， 高 阶 转移 概率 的 明显 表达 式 通常 很 难 算 出 ， 但 是 ， 举 而 
对 它 兴趣 不 大 ， 作 为 一 个 重要 的 〈 或 许 不 足 道 的 ) 例外 ， 我 们 注意 独立 试验 序列 这 
一 特殊 情况 ， 当 P 的 一 切 行 都 等 于 同一 个 概率 分 布 时 ， 就 会 出 现 这 种 情况 .不 需 计 
算 ， 立 刻 发 现 此 时 有 P" 二 PP 对 一 切 n 之 1 成 立 . 

(b) 成 功 连 贯 ， 在 第 2 节 例 GM 中 ， 易 见 [或 者 从 递归 公式 G.D 出 发 ， 或 者 
从 过 程 的 定义 出 发 j: 

gp’ “4 k=0,1,° ,nl 
pi =p" 4k=n 
0 其 他 情况 . 
显然 ，P" 收 全 到 一 个 矩阵 ， 其 第 衣 列 中 的 每 个 元 素 都 是 gp . 
绝对 概率 

ES a, 是 初始 (第 0 次 ) 试验 处 于 状态 E 的 概率 . 则 第 n BEARS Ei 的 

(无 条 件 ) 概率 为 
| a” = Sap. (3. 4) 


通常 ， 我 们 令 过 程 从 固定 的 状态 E 出 发 ， 而 是 令 w 王 1， 此 时 a” =p?. BME, 
我 们 感到 初始 状态 的 影响 会 逐渐 消退 ， 所 以 当 n 很 大 时 ， 分布 (3.4) 与 切 妈 分 布 


|. 后 面 这 一 性 质 是 将 在 第 13 节 定 义 的 马尔 可 夫 过 程 的 特征 .长 时 间 以 来 ， 都 假定 把 (3. 3) 作为 马尔 
可 夫 链 的 定义 ， 但是， 奇怪 的 是 ， 它 却 不 能 作为 马尔 可 夫 链 的 定义 [参见 第 13 节 例 D]. 
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(ao 无关， 当 pe 收敛 到 一 个 与 7 无 关 的 极限 时 〈 如 在 最 后 一 个 例子 中 ) BNE Prk 
伍 到 一 个 行 行 都 一 样 的 挎 阵 时 ， 就 是 这 种 情况 .我 们 将 看 到 往往 如 此 ， 但 不 总 是 如 
此 ， 由 周期 而 引起 的 繁杂 的 例外 我 们 也 必须 给 出 . 


15.4 闭 包 与 闭 集 


如 果 存 在 某 个 n 宇 0 使 pe >0 CHIE, HE, BALE, 的 概率 为 正 ， 其 中 包括 E = 
E, 的 情况 )， 则 称 E; 能 到 达 五 例如， 在 无 限制 的 随机 徘徊 中 ， 每 一 个 状态 能 到 达 
任何 其 他 状态 ， 但 在 有 吸收 厨 的 随机 人 徘徊 中 ， 册 吸收 壁 不 能 到 达 其 他 任何 状态 . 

EM ” 设 C 是 状态 的 一 个 集合 ， 如 果 从 CC 内 的 任何 一 个 状态 巨 ;不 能 到 达 C 外 的 
任何 状态 ， 则 称 C 是 闭 的 ， 包含 C 的 最 小 财 集 称 为 C HME. 

如 果 单 个 状态 五 ; 构成 一 个 闭 集 ， 则 称 FF; 是 吸收 的 . 

称 一 个 蕊 尔 可 夫 链 是 不 可 约 的 ， 如 果 除 了 一 切 状 态 构 成 的 集合 以 外 ， 没 有 任何 
其 他 的 闭 集 . 

显然 C 为 团 集 的 充分 必要 条 件 是 ， 当 7 在 C Pith TEC 外 时 忠 有 pj 二 0， 在 这 种 
情况 下 ， 由 (3.2) 可知: 对 一 切 n 总 有 pl 人 ?二 0， 因 此 显然 有 下 面 的 

定理 如 果 在 P" 中 删 去 闭 集 C 中 的 状态 所 对 应 的 行 和 列 ， 则 剩 下 的 还 是 一 个 随 
机 矩阵 ， 而 且 基 本 关系 (3.2) 和 (3.3) 仍然 成 立 . 

这 意味 着 我 们 得 到 一 个 定义 在 C 上 的 马尔 可 夫 链 ， 而 且 这 个 子 链 可 以 不 涉及 一 
切 其 他 状态 而 独立 地 研究 . 

状态 E, 是 吸收 的 当 且 仅 当 1， 在 此 情况 下 ， 上 述 定 理 中 的 矩阵 退化 成 一 个 
单一 的 元 素 ， 一 般 地 ， 显 然 ， 从 一 个 给 定 的 状态 E, 所 能 到 达 的 状态 的 全 体 构成 一 个 
A. (CAN E 的 闭 包 不 能 小 于 这 些 状态 构成 的 集合 . ) 一 个 不 可 约 的 链 不 能 包含 真 
闭 子 集 ， 因 此 ， 有 下 面 简单 的 但 有 用 的 准则 . 

准则 ”一 个 链 是 不 可 约 的 充分 必要 条 件 是 每 一 个 状态 都 可 以 到 达 其 他 任何 一 
个 状态 . 

例 (a) 为 了 找 出 所 有 闭 集 ， 只 需 知道 pj 中 哪些 为 0 哪些 大 于 0， 因此， 我 们 用 
“x” 号 代表 正 元 素 ， 并 考虑 下 面 的 典型 矩阵 ， 

0 0 0 * 0 


O o o o2 Oo xXx OO OO 
O Oo * xXx DOD O O X 
O xXx OD ODO CO OC * 
x OO COD CO ooo 
O ODO o * O O X 
>o ó x oo o o o o O 
DOD D k O O OO OD OO 
O oo o o o * © O 
* āo o0 oo CO o © * x 
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我 们 把 状态 从 1 到 9 标号 ， 在 第 5 行 ， 只 在 第 5 个 位 置 出 现 x 号， 所 以 pss 二 1]， 从 而 
E; 是 吸收 状态 .在 第 3 行 和 第 8 行 ， 各 有 一 个 * 号 ， BRE, ME, 构成 一 个 闭 集 . 
M E 可 以 到 达 E 和 EE,， 而 且 从 它们 也 仅 仪 能 到 达 ,EE ,Es。， 所 以 此 三 个 状态 E, 
E, E 构成 男 外 一 个 闭 集 . 

ME, 出 发 ， 可 以 直接 到 达 E, E, E, E 状态 对 (FE, ,Es) 构 成 一 个 闭 集 ， 而 E 
是 吸收 状态 ， 因 此 ，E, 的 闭 包 是 由 瑟瑟 ,EE; ,Es 所 构成 的 集合 ， 剩 下 的 两 个 状态 Es 
ALE, 的 闭 包 显然 是 由 全 部 9 个 状态 构成 的 集合 . 

把 状态 重新 按 下 述 方式 进行 编号 ， 

E E E,E, E, E, E E, E. 
CIRRUS, MEG, RBE RENRS. mH — 
看 新 的 矩阵， 就 能 显示 状态 群 . 

(b) 在 第 2 节 例 (j) WEP, RAE, ME, 都 是 吸收 状态 ， 而 且 没 有 其 他 
闭 集 . 
(c) 在 遗传 学 的 第 2 节 例 DB, E 和 Ezy 是 吸收 状态 ， 当 oj 二 2N 时 ， 上 ;的 
闭 包 包含 了 所 有 状态 .在 第 2 节 例 (h) F, E, 和 Ew 者 是 吸收 状态 ， > 
考虑 一 个 具有 状态 EL. E, 的 链 ， 其 中 EL, E, 构成 一 个 财 集 <o. 了 的 
左上 和 角 的 >- 行 > 列 构成 一 个 矩阵 ， 它 是 随机 和 矩阵， 这 样 ， 我 们 可 以 把 三 表示 成 下 列 分 
HEERE: 
p=: f A (4.1) 


U Vo. 
右上 角 的 > 行 o 一 r 列 的 子 和 矩阵 的 每 一 个 元 素 都 是 0， 类 似 地 ,， 忆 是 一 个 po 一 ~ 行 -> 列 的 
mE, TV 是 一 个 方 阵 。 4AE C 和 它 的 补 集 C 包含 无 穷 多 个 状态 时 ， 我 们 也 可 以 
用 上 述 分 块 表示 法 ， 分 块 清楚 地 显示 状态 的 群 和 下 述 事实 : 4E EC PME, Eth 
集 C' 中 时 ，pi 二 0， 由 递归 公式 (3. 2)， 显 然 ， 高 阶 转移 概率 和 矩阵 也 有 类 似 的 分 块 表 


不 法 : 
n 0 . 
pf 0] a 
U, yr. 


HE, RADHA AE U, 暂 不 感 兴趣 感 兴趣 的 是 〈4. 2) 显示 出 的 三 个 
明显 的 事实 . AB, EEC, EECH, p?P=0; Bo, OW 表明 C 中 的 两 个 状态 
E, FUE, 的 转移 概率 在 利用 递归 公式 (3.2) 求 和 而 得 时 ， 其 参与 求 和 的 状态 只 限于 
CH. BE, V" 的 出 现 ， 表 明 上 述 论证 以 CR C 时 仍然 成 立 ， 作 为 一 个 推论 ， 分 别 
考虑 闭 集 C 中 的 状态 和 其 补 集 C' 中 的 状态 ， 可 能 简化 马尔 可 夫 链 的 进一步 的 研究 ， 

注意 ， 我们 并 未 假定 8@ 是 不 可 约 的 ， 如 果 C 能 分 解 成 几 个 闭 子 集 ， BA, OM 
可 以 进一步 分 块 ， 有 无 穷 多 个 闭 子 集 的 链 是 存在 的 . 

例 (qd) 如 前 所 提 及 的 , 平面 上 的 随机 徘徊 是 一 个 特殊 的 马尔 可 夫 链 ， 尽 管用 位 
单 序列 来 给 其 状态 标 序 在 实用 中 不 方便 ， 现 在 我 们 把 随机 徘徊 的 运动 规则 修改 一 下 ， 
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当 质 点 到 达 r- 轴 以 后 ， 它 一 直 在 x+- 轴 上 运动 而 永 不 离开 ， 于 是 x- 轴 上 的 全 部 的 点 
构成 一 个 闭 集 ， 男 一 方面 ， 如 果 我 们 约定 质点 一 旦 到 达 z- 轴 上 某 一 点 以 后 ， 就 永远 
停留 在 这 个 击 中 的 点 上 ， 则 r- 轴 上 的 每 一 个 点 都 是 吸收 状态 . > 


15.5 ”状态 的 分 类 


在 一 个 从 初始 状态 五 出 发 的 过 程 中 ， 接 连 返 回 五 构成 一 个 循环 事件 ， 而 接连 到 
达 其 他 任何 一 个 状态 E 构成 一 个 迟延 的 循环 事件 〈 如 第 13. 5 节 所 定义 )， 因此 ， 马 
尔 可 夫 链 理论 只 不 过 是 同时 研究 多 个 循环 事件 而 已 ， 循环 事件 的 一 般 理论 不 需 修 改 
即 可 应 用 ， 但 是 ， 为 了 避免 过 多 地 参考 第 13 章 ， 我 们 还 是 重 述 一 些 基本 定义 ， 因 
此 ， 这 一 章 本 质 上 是 自封 的 ， 是 独立 于 第 13 BH, RE 6.8) 的 困难 的 证 明 不 再 完 
全 重复 而 已 . 

马尔 可 夫 链 的 状态 将 要 从 两 种 不 同 的 观点 独立 地 进行 分 类 ， 把 状态 分 成 常 返 的 
和 和 暂 留 的 是 基本 分 类 法 ; 然而 涉及 技术 细节 时 ， 还 把 状态 分 成 周期 的 和 非 周 期 的 . 
讨厌 的 是 ， 这 些 问题 经 常 涉 及 一 些 不 足 道 的 事情 ， 开 始 时 ， 我 们 把 注意 力 集中 在 没 
有 周期 状态 的 场合 ， 这 一 节 的 所 有 定义 只 涉及 转移 概率 矩阵 而 与 初始 分 布 iaj } 无关. 

定义 1 ARSE RAAM, PRE nAvt H pP=0MAtAAARKHAM 
的 最 大 整数 ; 如 果 这 样 的 OLA BA, MRE, 是非 周期 的 . 

研究 周期 状态 EE,， 只 需 考 虑 链 在 第 1,2t,3t… 次 试验 的 情况 就 够 了 .用 这 种 方法 ， 
我 们 得 到 了 一 个 具有 转移 概率 p 的 新 的 马尔 可 夫 链 ， 在 此 新 链 中 ，E; 是 非 周 期 的 . 
用 这 种 方法 ， 非 周期 状态 的 结果 可 以 转化 到 周期 状态 中 去 ， 第 9 节 将 要 详细 讨论 ， 
而 (除了 下 面 的 例子 以 外 〉 现在 我 们 把 注意 力 集 中 到 非 周 期 链 ， 

例 (a) 在 无 限制 的 随机 徘徊 中 ， 每 个 状态 都 具有 周期 2. 在 0 和 ww 都 具有 吸收 壁 
的 随机 徘徊 中 [第 2 节 例 (b)j-， 内 部 的 状态 具有 周期 2， 但是， 吸收 状态 E ME, 
都 是 闭 包 ， 且 为 非 周期 的 ， 如 果 两 个 壁 中 至 少 有 一 个 是 反射 壁 [第 2 节 例 《c)j， 所 
有 状态 都 是 非 周 期 的 . > 

记号 在 整个 这 一 章 中 ，f 人 ?代表 过 程 从 万; 出 发 第 1 次 到 达 状 态 E 在 第 n 步 的 
概率 ， 记 Am 一 0， 且 


fa = DSF» (5.1) 


w = afp (5. 2) 


显然 ，fi 是 从 Ej; 出发， 系统 迟早 要 经 过 E, 的 概率 ， 所 以 fal. 当 falh, 
{fw} 是 一 个 完全 的 概率 分 布 ， 且 视 之 为 初 达 E 的 分 布 ， 特 别 地 ，!( 万 /和 证 忆 ;的 特 


1. 永 不 返回 的 状态 E 是 存在 的 (例如 对 一 切 n>, pP = 这 种 状态 也 称 为 非 周期 的 . 
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环 时 间 的 分 布 ， 只 有 当 方 王 1 时 ， 即 是 E 必然 能 返回 ， 定 义 GD 才 是 有 意义 的 . 
ERRAT, uy SLE E, 的 平均 循环 时 间 . 

为 了 我 们 现在 的 上 且 的 ， 不 要 求 对 概率 fi? 进行 实际 计算 , 但是， 为 了 形式 上 的 清 
晰 ， 我 们 要 指出 如 何 决定 fi? (用 标准 的 更 新 推理 )，、 如 果 E, 在 第 v 次 试验 第 1 次 出 
现 U<v<n—-1), WE, 在 第 n 次 试验 出 现 的 (条 件 ) 概率 为 pk”. 回 忆 pe =1 的 
约定 ， 有 : 


pe = Y Sfp”. (5.3) 
v=1 


接连 地 令 n 二 1,2,… ,我们 递归 地 得 到 PSP. RZ, 4 AP MENG.) 
切 允 都 知道 以 后 ， 则 (5.3) 决定 了 一 切 转移 概率 pP. 

第 一 个 问题 是 ， 对 任 -一 状态 E; 而 言 ， 是 否 必然 返回 到 它 自己 ， 如 果 必然 返回 ， 
更 _ 步 向 平均 循环 时 间 ww 是 有 限 或 无 穷 ， 下面 的 定义 使 用 的 术语 与 第 13 章 是 一 
样 的 . 

定义 2 车 f= 二 1， 则 称 状态 已 是 常 返 的 ; 车 f; 二 1， 则 称 已 是 暂 留 的 . 

称 常 返 状态 E 是 零 状态 ， 如 果 其 平均 循环 时 间 p, =m. 

此 定义 也 可 用 到 周期 状态 中 去 ， 把 全 部 常 返 状态 分 成 了 零 状 态 和 非 零 状态 .后 
者 特别 有 趣 ， 因 为 我 们 经 常 把 焦点 集中 到 非 周期 状态 ， 对 非 周期 的 常 返 的 非 零 状 态 ， 
称 作 遍 历 状 态 是 方便 的 ! ， 这 导出 下 列 

定义 3 称 非 周期 的 常 返 的 状态 E 是 遍历 的 ， 如 果 yL. 

下 面 的 定理 用 转移 概率 P? 的 各 种 不 同类 型 的 条 件 来 表述 虽然 定 理 中 的 准则 很 
难 应 用 ， 但 仍然 非常 重要 ， 较 好 的 准则 可 在 第 7 节 和 第 8 节 中 找到 ， 但 遗憾 地 是 ， 那 
里 没有 这 里 的 简单 且 通 用 的 准则 . 

定理 O 已 是 暂 留 状态 的 充分 必要 条 件 是 


> py” < co. (5. 4) 
此 时 ， 对 一 切 i 均 有 和 
Dp < oo, (5.5) 
Gi) E 是 〈 常 返 的 ) 家 状态 的 充分 必要 条 件 是 
py 一 co, 但 pi? 一 0( 当 7 一 ce)， (5. 6) 
= 


1. 遗憾 的 是 ， 这 些 术 语 并 不 是 普遍 地 被 接受 的 . 在 科 尔 莫 艾 罗 夫 的 术语 中 ， 暂 留 状态 (Transient 
state) 被 称 作 “ 非 本 质 的 ” (unessential), 但 是 ， 这 一 章 中 ， 理论 和 实际 的 兴趣 都 集中 在 暂 留 状 
态 ，( 近 代位 势 理论 也 支持 这 种 观点 . ) 遍历 状态 (ergodic state) 有 了 时 称 作 “ 正 状 态 ” (positive 
state)， 而 “遍历 状态 ”有 时 又 用 作 我 们 此 处 的 “ 常 返 状态 ”” 《在 本 书 的 第 一 版 中 ， 遗憾 地 是 ， 把 
“HORRI” E; 称 作 “循环 的 ”《recurrent)， ) 
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pi; 0 (5.7) 
(iii) 非 周 期 ( 常 返 的 ) RAE 是 遍历 的 充分 必要 条 件 是 jj 二 0， 此 时 ， 当 
n 一 co 时 有 
p fun; . (5. 8) 
R 如果 ;是非 周期 的 ， 则 ps” 趋 于 0 或 者 趋 于 (5.8) AA EHAR, 
定理 的 证 明 论断 (5.4) 含 于 第 13. 3 节 定 理 2 中 ,论断 (5.5) 是 (5.4) 和 
(5.3) 的 直接 推论 ， 同 时 它 也 含 于 第 13. 5 节 定 理 1 中 . 
对 于 一 个 非 周 期 的 常 返 状态 E,， 第 13. 3 节 定 理 3 断言 p ome? ， 此 处 当 广 三 ce 
时 右 方 理解 为 0， 论断 (5.7) 和 (5. 8) 仍 可 由 此 结论 和 “(5. 3) 直接 推出 ， 或 者 从 
第 13.5 节 定 理 1 排出 . 
SE 是 常 返 的 而 且 ; 二 oo， 由 第 13.3 HEH, AMA. pO. mes 
waT (5.7). > 
例 (b) 考 虑 第 2 节 例 (1) 中 的 链 的 状态 E。,， 转 移 概率 窍 阵 的 奇特 形状 表明 : 
第 1 次 返回 出 现存 第 次 试验 只 有 沿 下 列 序 列 进行 才 有 可 能 : 
E, >E >E, — E, >E, 
因此 ， 对 n 宇 1 有 
fE 一 户 加 pgv， (5. 9) 
MH JS =q. Æ p W (2.5) 所 定义 的 特殊 情况 下 ， 6.9) 化 为 fio =f. 因此 ， 
XEF A, E 是 暂 留 的 ， 对 于 一 个 常 返 的 状态 EL, Eo 的 平均 循环 时 间 po 是 分 
布 {f,} 的 期 望 ， 最 后 ， 如 果 E BAWAK, Wn 不 是 上 的 倍数 时 ， 总 有 SO. Tee 
而 言 之 ， 正 如 人 们 所 期 望 的 那样 ， 如 果 8 是 与 马尔 可 夫 链 相 联系 的 循环 事件 ， 那 么 
E, 在 8 中 的 类 型 与 在 马尔 可 夫 链 中 的 类 型 是 一 样 的 . 
(c) 在 第 4 节 例 (a) 中 ， 一 旦 系统 离开 状态 E. ， 就 再 也 不 可 能 返回 到 上,， 所 以 
E, 是 暂 留 的 ， 将 此 推理 略为 精细 化 ， 就 可 知 Es AE, 都 是 暂 留 的 ， 由 定理 6,4， 饭 
见 所 有 其 他 状态 都 是 遍历 的 . > 


15.6 不 可 约 链 ， 分 解 


为 了 简单 起 见 ， 称 两 个 状态 是 同一 个 类 型 的 ， 如 果 上 一 节 定 义 的 所 有 特性 它们 
都 一 样 ， 换 甸 话 说 ， 同 一 类 型 的 两 个 状态 或 者 具有 相同 的 周期 或 者 部 是 非 周 期 ， 或 
者 两 个 都 是 常 返 的 或 者 两 个 都 是 暂 留 的 ; 如 果 两 个 都 是 常 返 的 ， 那 么 它们 的 平均 循 
环 时 间或 者 都 是 有 限 的 或 者 都 是 无 穷 大 . 

我 们 分 类 的 有 用 性， 很 大 程度 上 依赖 于 下 列 事实 : 对 于 一 切实 际 需 要 ， 经 凋 F 
以 把 注意 力 集中 到 一 类 特殊 的 状态 .下 一 个 定理 将 要 证 明 ， 对 不 可 约 链 而 言 ， 这 征 
严格 成 立 的 . 

定理 1 不 可 约 链 的 所 有 状态 都 属于 同一 个 类 型 . 
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证 邻 E, 和 EE 是 不 可 约 链 的 任意 两 个 状态 .根据 第 4 节 的 准则 ， 每 一 个 状态 都 

可 以 到 达 其 他 任 一 状态 ， 所 以 存在 整数 +- 和 ;使 pi 二 a 二 0 A py =8>0. 显然 

DS SPR PB PB Saphi. (6. 1) 
此 处 j,k,r,s 都 是 固定 的 而 n 是 任意 的 .对 暂 留 状态 E 而 言 ， 左 边 是 收敛 级 数 中 的 
一 项 ， 从 而 加 如 也 是 收敛 级 数 中 的 一 项 此外,， 若 po, M pg 一 0， 当 了 和 地 位 
互 换 时 ， 上 述 类 似 的 论述 也 对 ， 因 此 ,或 者 E 和 E 两 个 都 是 暂 留 状态 或 者 一 个 都 
不 是 ， 如 果 有 一 个 是 零 状 态 ， 另 一 个 也 是 . 

Bis, BEE 具有 周期 :， 当 n==0 时 ，(6.1) 右边 是 正 的 ， 因 此 rts 必 为 1 的 
整数 倍 ， 但 当 nn 不 是 1 的 整数 倍 时 ， 左 边 为 0， 所 以 E 是 周期 的 ， 且 其 周期 为 上 的 整 
数 倍 ， 把 7 和 的 地 位 互 换 即 可 见 五 |; AE, 具有 相同 的 周期 . > 

与 下 述 定 理 2 联系 起 来 ， 定 理 1 的 重要 性 就 显而易见 了 . 

定理 2 对 于 一 个 常 返 状态 FE; 而 言 ， 总 存在 惟一 一 个 不 可 约 的 闭 集 C 包含 EF; 且 
使 C PERAE EL, RA: 

fa =l H fa™l. (6. 2) 

换 名 话说， 从 C 中 的 任何 一 个 状态 出 发 ， 系 统 必 然 要 经 过 C 中 任何 一 个 其 他 状 
态 ， 由 闭 包 的 定义 ， 从 C 流出 是 不 可 能 的 . 

证 SE, 是 一 个 能 由 EE; 到 达 的 状态 ， 显 然 ， 在 返回 E, 以 前 到 达 E 是 可 能 的 ， 
今 此 事件 的 概率 为 a， 一 旦 到 达 E, 以 后 ， 再 也 不 返回 E; 的 概率 是 1 一 fi， 因此 ， 从 
E, 出 发 系统 从 未 返回 E; 的 概率 之 a(1 一 fy )， 但 是 对 一 个 常 返 状态 E Ma., MDR 
回 的 概率 是 0， 所 以 fy =1 对 一 切 从 五 能 到 达 的 五 :都 成 立 . 

A C 为 一 切 能 从 瓦 , 到 达 的 状态 ，、 如果 E AE, 都 在 C 中 ， 我 们 已 知 E, 能 到 达 
因此 ，E 也 能 到 达 E;， 所 以 C 中 每 一 个 状态 都 可 以 到 达 C 中 的 任 一 个 其 他 状 

， 从 而 用 第 4 节 的 准则 得 知 C 是 不 可 约 的 ， 由 此 推出 C 中 所 有 状态 都 是 常 返 的 ， 
nee E, 都 可 以 起 到 推理 的 第 一 部 分 中 EE, 这 一 角色 的 作用 . KERE 
所 二 1 对 C 中 一 切 E 都 成 立 ， 故 (6.2) 成 也. > 

前 一 个 定理 蕴涵 了 下 述 结论 : 每 一 个 常 返 状态 的 闭 包 都 是 不 可 约 的 .但 对 暂 留 
状态 而 言 ， 此 结论 不 一 定 正确 . 

Bi) “假定 对 一 切 E<7 有 pi 一 0， 但 六 0， 即 是 只 能 转移 到 较 高 的 状态 ， 所 
以 任何 一 个 状态 都 无 返回 的 可 能 .每 一 个 EE 都 是 暂 留 的 ， 而 且 E WA E, Ej. 

Eno AR, EMS TREE 后 所 得 之 闭 子 集 . 由 此 推出 ， 不 存在 不 可 约 集 ， OD 

上 面 的 定理 蕴涵 了 下 述 命题 ， 从 常 返 状 态 不 能 到 达 暂 留 状态 如果 某 链 包 仿 了 
两 类 状态 ， 这 意味 着 了 表示 成 如 (4. 1) 的 分 块 形式 ， 其 中 Q 对 应 着 常 返 状态 .不消 
说 ，O 可 能 进一步 分 解 ， 但 是 每 一 个 常 返 状态 属于 惟一 一 个 不 可 约 子 集 ， 而 在 这 些 寺 
集 之 间 的 转移 是 不 可 能 的 ， 我们 扼要 说 明 如 下 : 

定理 3 马尔 可 夫 链 的 状态 可 用 惟一 的 方式 分 化 如 下 列 不 登 交 集合 : TG, 
Cot ,使 
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O 工 由 全 部 暂 留 状态 构成 . 

GD 如 果 EEC, Mah EEC， 有 fi 二 1， 而 对 一 切 EEC, A fi 二 0. 

由 此 和 定理 可 以 推出 : C 是 不 可 约 的 而 且 只 包含 同一 类 型 的 状态 。 上 面 的 例子 说 
明 可 能 一 切 状态 都 是 暂 留 的 ， 而 第 4 节 例 (d) 又 证 明了 有 无 穷 多 个 C, 也 是 可 能 的 . 

我 们 把 下 面 的 定理 作为 定理 2 的 一 个 简单 的 系 而 推出 ， 但 是 也 可 以 用 其 他 的 简 
单 办 法 来 证 明 〈 见 习题 18 一 20). 

定理 4 对 有 限 链 而 言 ， 不 存在 零 状态 ， 而且 所 有 状态 都 是 暂 留 的 情形 也 是 不 
可 能 的 . 

证 产 的 每 一 行 之 和 都 是 1， 而 当 其 元 素 个 数 是 一 个 固定 的 数 时 ， 不 可 能 对 一 
Disk, BA z 记 一 0， 因 此 不 可 能 所 有 的 状态 都 是 暂 留 的 ， 知 一 个 常 返 状 态 属 于 不 可 
约 集 C， 则 C 中 所 有 状态 属于 同一 个 类 型 . 因此 ， 由 C 包含 了 一 个 常 返 状 态 而 且 至 
少 有 一 个 非 零 状态 得 知 : 它 不 含 零 状 态 . > 


15.7 不 变 分 布 


因为 每 一 个 常 返 状 态 属 于 一 个 不 可 约 的 集合 ， 且 其 渐 近 性 质 可 以 独立 地 俩 究 而 
不 依赖 其 余 的 状态 ， 所 以 我 们 集中 研究 不 可 约 链 。 此 种 链 的 所 有 状态 部 是 同一 种 类 
型 的 ， 我们 从 最 简单 的 情形 开始 ， 即 是 ， 链 具有 有 限 的 平均 循环 时 间 y. 为 了 避免 
一 些 不 足 道 的 事情 ， 我 们 把 周期 链 推迟 到 第 9 Pie. Maa, 我 们 现在 考虑 的 链 
都 是 遍历 的 《〈 即 是 ， 其 状态 都 是 非 周 期 的 常 返 的 而 且 具 有 有 限 的 平均 循环 时 间 . K 
定义 5.3)， 

定理 在 一 个 不 可 约 的 其 状态 为 遍历 的 链 中 ， 极 限 


u, = limpi? (7. l1) 
恒 存 在 而 且 不 依赖 初始 状态 7. 此 外 u>, 
Sy uy, = 1 (7. 2) 
H? 
u; 一 > U;Pij. (7. 3) 


反之 ， 假 定 链 是 不 可 约 的 非 周 期 的 ， 而 且 存 在 数列 之 0 满足 (7.2) F (7.3), X 
所 有 状态 都 是 遍历 的 ， 羽 均 由 (7.1) 所 给 出 且 
u, 1/ pu (7.4) 
其 中 jy Æ E, 的 平均 循环 时 间 . 
证 ”假定 链 是 不 可 约 的 周期 的 ， 并 定义 如 《7.4)， 定 理 6.2 保证 对 一 切 i,] 
有 f; 二 1， 昌 论断 (7.1) kA 6.8). 因为 


1. WRH {wj } 想像 为 行 向 量 ，(?. 3) 可 写 为 矩阵 形式 u=uP. 
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PE? = DPP Pn» (7. 5) 
当 六 co 时， 左边 趋 于 几 ， 而 右边 的 和 中 的 一 般 项 趋 于 ww 加 sx。 仅 取 有 限 项 我 们 得 到 
us 之 D ujb. (7. 6) 

SHEA 2 Ain, (7.5) 左边 加 起 来 等 干 1， 因此 ， 
s= Duc. (7.7) 


E (7.6) 中 对 一 切 求 和 得 到 关系 式 s 实 ss， 在 此 式 中 不 等 号 是 不 可 能 成 立 的 .由 此 
断言 ， 对 一 切 训 《7.6》 式 中 的 等 号 成 立 ， 从 而 定理 的 第 一 部 分 成 立 . 
Gi) 假定 u0 而 且 (7.2) 一 (7.3) 成 立 ， 由 归纳 法 
= dupe. (7. 8) 
对 一 切 n>l 成 立 ， 因 为 链 是 不 可 约 的 ， 所 有 状态 属于 同一 种 类 型 ,如果 它们 都 是 暂 
留 状态 或 零 状 态 ， 则 (7.8) 右边 当 >ce 时 趋 于 0， 而 此 事实 不 可 能 为 一 切 有 都 成 
v, Adu 加 起 来 等 于 1. 周期 链 是 排除 掉 的 ， 所 以 一 切 状态 都 是 遍历 的 ， 从 而 年 
理 的 第 一 部 分 可 以 应 用 ， 因 此 ， 今 ”一 co 得 
一 Dwi. (7.9) 
所 以 概率 分 布 {uw} 与 概率 分 布 {yx') 完 全 一 样 ， 故 二 jn 得 证 . > 
为 了 欣赏 此 定理 的 意义 ， 考 虑 过 程 由 初始 分 布 {a } 的 发 展 进 程 。 状 态 E, 在 第 7 
步 出 现 的 概率 为 


ay” = = Labi (7. 10) 
[ 见 3.40]. Ak, (7.1) 当 n>co 时 有 
ay” —u,. (7. 11) 


换 名 话说， 不 管 初始 分 布 如 何 ，E 的 概率 趋 于 wu， 另 一 方面 ， 当 (wuw} 是 初始 分 布 时 
(EI a =u), W (7.3) 蕴涵 了 aP =u, FARA A a” =u, 对 一 切 n a. A 
E, FRE (7. 3) 的 初始 分 布 使 之 对 一 切 时 刻 都 成 立 ， 由 于 这 个 理由 ， 故 称 之 为 不 变 
的 . 

定义 ”满足 (7.3) 的 概率 分 布 {wu) 称 为 不 变 的 或 平稳 的 (对 给 定 的 马尔 可 夫 链 
m). 

上 一 个 定理 的 主要 部 分 可 复述 如 下 : 

一 个 不 可 约 的 非 周 期 的 链 产 生 一 个 不 变 的 概率 分 布 (wu) 的 充分 必要 条 件 是 ， 此 
链 是 遍历 的 ， 存 此 情况 下 ， 对 一 切 上 都 有 ui 汪 >0， 而 且 绝 对 概率 a,” 趋 于 ui 与 初始 分 
布 无 关 . 

如 果 我 们 想像 有 很 多 个 过 程 在 同时 进行 ， 则 平稳 性 的 物理 意义 变 得 非常 明显 . 
为 确定 起 见 ， 考 虑 N 个 质点 独立 地 进行 同一 种 类 型 的 随机 徘徊 ， 在 第 nn 步 ， 处 于 状 
K E, 的 质点 的 个 数 的 期 望 值 是 NaP, CEF Nu. 充分 长 的 时 间 以 后 ， 分 布 是 渐 近 
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地 不 变 的 ， 物 理学 家 就 说 ， 他 观察 到 质点 处 于 平衡 态 ， 因此， 分 布 tw } 也 称 作 平 衡 
分 布 ， 不 六 的 是 ， 此 术语 分 散 了 对 一 类 重要 的 情况 的 注意 力 ， 中 所谓 的 宏观 的 平衡 ， 
也 即 大 量 反 向 转移 维持 的 平衡 。 单 个 质点 显示 不 出 趋向 平衡 ， 而 且 我 们 的 极限 定理 
对 单个 过 程 也 没有 什么 内 涵 . 这 方面 的 典型 是 第 3 章 中 讨论 的 对 称 的 随机 徘徊， 如 
果 大 批 的 质点 从 原点 出 发 独立 地 作 这 种 随机 徘徊 ， 那 么 ， 粗 略 地 说 ， 在 任 一 时 刻 有 
一 半 质 点 在 原点 的 右边 ， 而 另 一 半 在 原点 的 左边 . 但是， 这 并 不 意味 着 大 多 数 质点 
有 一 半 时 间 在 原点 右边 ， 相反， 反正 纺 律 证 明 ， 大 多 数 质点 在 大 部 分 时 间 里 都 处 于 
原点 的 一 个 方向 ， 从 这 种 意义 上 讲 ， 大 量 性 并 不 代表 本 质 ， 此 例 是 一 个 极端 情形 ， 
其 平均 循环 时 间 是 ce。 对 于 遍历 链 而 言 ， 随 机 起 伏 比 较 平 和 ， 但 是 ， 当 平均 循环 时 
间 具 有 很 大 的 (或 无 穷 的 ) 方差 时 ， 从 实用 的 日 的 看 ， 它 仍然 显示 出 上 述 性 质 ， 许 
多 进一步 的 讨论 和 对 “ 趋 于 平衡 ”的 统计 意义 的 正确 理解 ， 可 以 避免 一 些 错误 的 结 
ie. 

在 前 面 的 定理 中 ， 我 们 假定 了 链 是 不 可 约 的 和 非 周 期 的 ， 自 然 要 问 ， 在 多 大 的 
程度 上 这 些 假设 是 本 质 的 ， 仔 细 研 究 证 明 就 会 发 现 ,我们 证 明 的 东西 比 定理 中 陈述 
的 要 多 ， 特 别 是 通过 下 面 的 准则 可 以 应 用 到 任意 的 链 〈 包 括 周 期 的 和 可 约 的 链 ) 的 
事实 可 以 看 出 上 述 结论 正确 . 

准则 ”如果 一 个 链 具 有 不 变 概 率 分 布 {wu})， RHE 是 暂 留 状态 或 零 状 态 ， 则 
u, =O. 

mG, ul 蕴涵 了 E 是 常 返 的 且 有 有 限 的 平均 循环 时 间 ， 但 E 可 以 是 周 
期 的 . 

证 ”我们 已 经 看 到 : {w } 的 平稳 性 蕴涵 了 《7. 8) A, WR E, 是 暂 留 的 或 者 是 
零 状 态 ， 则 对 一 切记 A peo, Miia =0. AEE. > 

对 于 周期 链 ， 第 9 节 中 将 要 证 明 的 预期 的 结果 是 : 对 每 一 个 不 可 约 的 其 状态 具 
有 有 限 的 平均 循环 时 间 的 链 ， 存 在 惟一 一 个 不 变 的 概率 分 布 {u.;}. 周期 链 之 所 以 排 
除 在 定理 之 外 ， 仅 仅 是 因为 简单 的 极限 关系 〈7.1) 和 (7. 11) RAT RAR 
式 ， 这 种 形式 掩盖 了 实际 上 不 需要 它 的 作用 的 本 质点 . 

Gl (a) 具 有 几 个 不 可 约 成 分 的 链 可 能 有 几 个 平稳 解 ， 一 个 平 几 的 但 又 典型 的 例 
子 是 具有 两 个 吸收 壁 E AE, 的 随机 徘徊 [参见 15.2 PA Cbd]. 任何 一 个 在 E。 和 和 
E, 上 有 正 的 权 数 的 形 如 (a,0,0,…,0,1 一 a》 的 概率 分 布 都 是 平稳 的 . 

(b) 给 定 一 个 由 转移 概率 加 构成 的 矩阵 ， 经 常 能 容易 地 决定 不 变 分 布 14w } 古 个 
存在 ， 一 个 明显 的 例外 是 ， | 

pa=0 ”对 一 切 |k 一 j| 之 1 成立， (7. 12) 
即 是 说 ， 非 零 元 素 只 能 在 主 对 角 及 其 紧邻 的 线 上 ， 把 其 状态 从 0 开始 标 起 ，(7. 3) 确 
定 的 关系 变 为 下 列 形式 : 
wo = Poo Uo F Pio tty | 
Uy = Po Uo F Py Uy F Pante» 


(7. 13) 
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等 等 .为 了 避免 不 足 道 的 事情 ,假定 P41 0s p> 对 一 切 j 成立, 但 对 主 对 角 
线 上 的 元 素 bp; 不 作 任 何 假设 . 由 (7.13) 可 以 逐 项 解 出 Ui s Uatn 回忆 一 下 ， PAY 
每 一 行 之 和 为 1， 可 得 : 
_ Po _ Pa Pr u u, = PeP a, 
Pio Pio Pri Pio Pz Px 
等 等 ， 得 到 的 〈 有 限 或 无 穷 ) 序列 usu (7.13) 的 惟一 解 . 为 了 使 它 是 一 个 
概率 分 布 ， 正 则 化 因子 u 必须 取得 使 >u 二 1， 这 种 选取 是 可 能 的 充分 必要 条 件 为 : 


Poi Piz Pos ttt Peik 
Pio Pa P32 *** Pee 


因此 ， 这 是 不 变 的 概率 分 布 存 在 的 充分 必要 条 件 ， 如 果 它 存在 ， 必 然 惟一 . 

在 第 8 节 例 (d) 中 ,我 们 将 推出 一 个 类 似 的 准则 以 检验 状态 是 否 是 常 返 的 .下 
面 三 个 例子 说 明 上 述 准 则 的 应 用 . 

(c) 反 射 壁 ， 第 2 节 例 (c) EE o<) 是 前 面 一 个 例子 的 特殊 情形 ， 其 特点 是 
pijt1 二 p (对 一 切 7 过 p)，pj;_ ;二 9 《对 一 切 7 之 1)， 当 状态 的 个 数 有 限时 ， 存 在 不 变 
ASH lud Ku, E a 乘 一 个 数 ， 当 状态 的 个 数 为 无 穷 大 时 ，(7. 15) 的 收敛 
HER p 二 gq， 而 且 在 这 种 情况 下 ，w 二 (1 一 p/9)(p/9)*， 由 随机 徘徊 的 一 般 理 论 匈 
见 ， 当 p>q 时 ， 状态 都 是 暂 留 的 ; 而 当 如 一 wa 时 ， 状 态 都 是 常 返 的 零 状态 .这 些 结 
果 也 可 从 第 8 节 例 Cd) 中 的 准则 推出 . 

(d) 埃 伦 费 斯 特 的 扩散 模型 ， 对 在 第 2 节 例 Ce) 中 的 矩阵 来 说 ， 解 〈7. 14) 化 为 


故人 (人 ju (7. 16) 


一 项 系数 是 OHI 的 二 项 展开 式 中 的 项 ， 因 此 ， 为 了 得 到 一 个 概率 分 布 ， 必 须 令 
,二 2-*， 链 的 周期 是 2， 状态 具有 有 限 的 平均 循环 时 间 ， 不 变 分 布 是 具有 py 
项 分 布 ， 

此 结果 可 以 作 如 下 解释 ， 不论 第 一 个 容器 中 的 分 子 的 初始 数目 是 多 少 ， 经 过 一 
段 相当 长 的 时 间 以 后 ， 在 第 一 个 容器 中 找到 个 分 子 的 概率 ， 近 似 地 等 于 a 个 分 子 随 
机 地 分 布 时 恰 有 此 个 分 子 放 入 了 第 一 个 容器 中 的 概率 (假定 每 个 分 子 放 入 第 一 个 容 


器 中 的 概率 为 广 )， 这 是 赋予 我 们 的 结果 以 物理 意义 的 一 个 典型 例子 


当 a 很 大 时 ， 二 项 分 布 的 正 态 有 逼近 表明 : 一 旦 极限 分 布 渐 近 地 建立 ， 我 们 实际 
上 一 定 能 在 每 个 容器 中 找到 一 半 的 分 子 ， 对 物理 学 家 来 说 ，a 二 10” 是 一 个 很 小 的 数 . 
即使 当 分 子 数目 a 二 10 时 ， 在 一 个 容器 中 找到 多 于 505 000 个 分 子 〈 密 度 起 伏 为 筷 
分 之 一 ) 的 概率 的 数量 级 也 只 有 lO”. 4a=-1l 时 ， 千 分 之 一 的 密度 起 伏 ， 类 似 的 
概率 也 是 同样 的 可 忽略 的 概率 ， 虽 然 系 统 也 偶然 到 达 可 能 性 极 小 的 状态 ， 但 它们 的 


(7. 14) 


< 9, (7. 15) 


1. 原著 此 处 后 面 方 括号 内 有 一 句 话 ， 不 对 ， 删 之 ， 一 一 译 者 注 


302 第 15 章 马尔 可 夫 链 


循环 时 间 和 和 接近 平衡 状态 的 循环 时 间 比 较 起 来 要 大 得 惊人 ， 物 理 中 的 不 可 逆 性 ,在 
下 列 事实 中 显现 出 来 : 当 系 统 处 于 远离 平衡 的 状态 时 ， 它 向 平衡 态 转移 要 比 反 问 转 
移 的 可 能 性 大 得 多 . 

(e) 伯 努 利 - 拉 普 拉 斯 扩散 模型 .对 具有 形 如 (2.1)〉 的 元 素 的 矩阵 来 说 ， 由 
(7. 14) 得 : 


Z 
m= (P) uo k=0, 9p (7.17) 


Saleen (°°) [ 见 第 2 章 (12. 11)]， 所 以 
w= (2) (°) (7.18) 


是 一 个 不 变 分 布 ， 这 是 超 几何 分 布 〈 见 第 26 7). 这 意味 着 在 平衡 状态 时 ， 每 个 容 
器 内 的 颜色 的 分 布 与 下 列 分 布 是 一 样 的 : 从 具有 po 个 黑 质点 和 个 白质 点 的 集合 中 随 


机 地 取 po 个 质点 的 颜色 的 分 布 . 
(在 第 2 节 例 (1) 中 ， 不 变 概率 分 布 满足 下 列 关系 : 
U, = Digis 天 一 1 2 (7. 19a) 
Uy = Qı Uy +o ty qsw Ttt. (7. 19b) 


由 (7. 19a) 得 : 

u, — pit Pytto » (7. 20) 
易 见 ，(7. 19b) 的 右边 的 前 项 之 和 为 uo 一 wu， 因此 ， 当 ww->0 时 ，(7. 19b) 旦 动 满 
足 ， 所 以 不 变 概 率 分 布 存在 的 充分 必要 条 件 是 : 


> pi pot pi To. (7.21) 


[也 可 见 第 8 节 例 Ce) 和 第 11 WH C. J 
Cg) 循环 事件 ， 在 第 2 节 例 Ck) 中 ， 不 变 概 率 分 布 的 条 件 化 为 : 
U, = Ur] T ferito» kR=0,1,°°°. (7.22) 
对 二 0,1,… 求 和 得 
Un 09 其 中 ra = fai frst (7. 23) 
因为 ntn t =u ROR. All, Spoon, REMETEN un, =r p 所 
给 出 ; 而 当 wx 一 co 时， 不 变 概 率 分 布 不 仔 在 . 
再 回忆 一 下 ， 马 尔 可 夫 链 是 与 具有 循环 时 间 分 布 {f;) 的 循环 事件 6 相 联系 的 
在 特殊 情况 p, 二 xr,/r_: 下， 前 一 个 例子 中 的 链 与 同一 个 循环 事件 相 联 系 ， 而 且 这 时 
(7. 20) 5 (7.23) 是 等 价 的 ， 因此， 不 变 分 布 是 一 样 的 ， 在 排队 论 的 语言 中 ， 人 们 
说 耗损 的 等 待 时间 与 剩余 的 等 待 时 间 趋 于 相同 的 分 布 ， 即 {m /p). 
我 们 曾经 从 循环 事件 理论 推导 出 马尔 可 夫 链 的 基本 极限 定理 ， 现 在 ， 我 们 将 要 
看 到 反面 情况 ， 即 循环 事件 可 以 作为 特殊 的 马尔 可 夫 链 来 处 理 . [第 11 节 例 Cd). J 
(h) 二 重 随机 答 阵 ， 称 随机 矩阵 是 二 重 随 机 和 手 阵 ， 如 果 不 仅 它 每 一 行 的 和 为 1， 


15.8 # W # 303 


而 且 它 每 一 列 的 和 也 是 1， 如 果 这 样 的 链 只 含有 有 限 个， 譬如 说 a 个 状态 ， 则 u= 
a ”是 一 个 不 变 分 布 ， 这 意味 着 在 宏观 平衡 中 ， 所 有 状态 出 现 的 可 能 性 都 是 一 样 的 . 


15.8 FF 留 链 


在 第 6 节 中 ， 我 们 曾经 看 到 : 任何 马尔 可 夫 链 的 和 常 返 状态 都 可 以 分 解 为 一 些 不 
相交 的 闭 的 不 可 约 的 集合 CG. CG.. 一 般 地 ， 还 有 一 个 非 空 的 暂 留 状态 类 T. 当 系 
统 从 一 个 暂 留 状态 出 发 时 ， 可 能 出 现 两 种 情况 : 第 一 ， 系 统 最 终 进 入 闭 集 C 并 永远 
留 在 其 中 ; 第 二 ， 系 统 始终 留 在 暂 留 集 荆 中 . 我 们 主要 的 目的 是 决定 相应 的 概率 . 
其 解 将 提供 一 个 准则 以 判断 一 个 状态 是 常 返 的 呢 还 是 暂 留 的 . 

例 《〈a) 蒜 ， 称 一 个 链 是 款 ， 如 果 对 每 个 7， 概 率 分 布 {pj} 的 期 望都 等 于 ;7， 即 
fz, WR | 


> Park =}. (8. 1) 
考虑 一 个 具有 有 限 状 态 Ey. E, 的 链 . FE (8.1) PS j= 和 j 二 a 13 po = Pa =1; 
所 以 E, AE, 都 是 吸收 状态 ， 为 了 避免 不 足 道 的 事情 ， 假 定 链 不 再 含有 更 多 的 财 集 . 
由 此 推出 ， 内 状态 E, » E,_|1 都 是 暂 留 的 ， 所 以 过 程 终 会 终止 在 E, 或 Ea. H 
(8.1), Xf n FERAE R N 


>S pPk = i. (8. 2) 
k=0 

但 是 pS? ->0 对 每 个 暂 留 状态 E 成立 ， 从 而 (8.2) BT: 对 一 切 ;0 有 
p? — t/a. (8. 3) 


换 名 话说， 如果 过 程 从 五 出发， 最 终 被 吸收 在 E 或 五 的 概率 分 别 为 1 一 wa i/a. 
(b) 特 殊 情 形 ， 遗 传 学 中 的 第 2 节 例 (h) 和 例 (D 所 涉及 的 链 ， 分 别 是 上 面 所 
讨论 的 例子 的 特殊 情况 : a=N 和 a 二 2N， 给 定 初 始 状 态 E;， 则 最 终 固 定 在 E HR 
zJ 1 一 i/a. l 
(c) 考 虑 一 个 具有 状态 EE. MH, EF E 是 吸收 状态 ， 而 从 其 他 状态 E 出 
发 ， 只 能 转移 到 右 邻 状态 E 和 E,， 而 不 能 转移 到 其 他 任何 状态 ， 对 j 宇 1， 令 


Po = 6 >Pign Fle. (8. 4) 

此 处 e 0， 选 定 初始 状态 E., En kik PARE, 吸收 的 概率 为 : 
dg) — ep) enn). (8. 5) 
KERK n 上 升 时 它 下 降 ， 所 以 它 趋 于 一 个 极限 %;， 因 此 最 终 被 吸收 的 概率 为 1 一 和 4;， 
而 系统 始终 留 在 暂 留 状态 的 概率 为 发， 为 盖 0 的 充分 必要 条 件 是 6 二 02. > 


$F RAS AOS KR PA TRETE, WA P PRATA RRS I — ITA 
一 切 列 ， 而 仅仅 剩 下 这 样 一 些 元 素 pe HOPE ME, 都 是 暂 留 状 态 ， 此 子 矩 阵 的 行 
和 不 一 定 是 1， 而 它 对 引进 下 述 定义 是 方便 的 . 

定义 称 具 有 元 素 o 的 方 阵 @ 是 准 随机 的 ， 如 果 qi 20 且 每 一 行 之 和 都 小 于 等 于 1. 
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据 此 定义 ， 每 个 随机 和 抢 阵 都 是 准 随机 的 ， 反 之 ， fE PERE LAL PERE a) AIG I — 
AIR WORAS Ta AMRF. CR TA. RITEM N77 1, 0, 0, =, ÆJ 
一 列 ， 其 元 素 是 @ 的 相应 的 行 的 和 与 1 的 差额 . ) Alike, BR, ROLES Hee 
可 以 不 需 本 质 性 的 修改 就 可 应 用 到 准 随机 和 矩阵 中 去 .特别 地 ， 递 归 关 系 式 〈3.2) E 
MT nih QO" 的 元 系 满足 下 述 关 系 


qr? = Ža a. (8. 6) 
定义 o” AQ’ 的 第 i 行 的 和 ， 则 对 一 切 n>! 有 
gP 一 = Zano , (8.7) 


当 我 们 对 一 切 vw， 定义 o =1 HF, (8.7) 对 n= 0 也 成 立 ， 由 8 是 准 随 机 和 矩阵 可 推出 
a) <6, 再 用 (8.7) 和 归纳 法 可 推出 of"? oi”. Ae, ATER i, FES a”) 
单调 下 降 到 一 个 极限 o; 宇 90， 显然 还 有 


o; 一 = Lido. (8. 8) 


暂 留 状态 的 全 部 理论 依赖 于 上 述 术 方程 组 的 解 fe. ERA IES H 

( 即 是 对 一 切 i 有 6o; 二 0)， 在 另 一 些 情况 下 ， 存 在 着 无 穷 多 组 线性 无 关 的 解 ， 即 古 不 
同 的 数 序列 满足 

XL, 一 N Gata. (8.9) 


第 一 个 问题 是 找 出 特 解 {o;}， 我 们 只 对 满足 条 件 OSS 〈 对 一 切 六 的 解 {z} 感 兴 
趣 ， 这 可 重新 写成 下 述 形式 SrL, VAR HIRE (8.9) 和 (8.7) 得 : 2:0" 
对 一 切 n Bean, AA 
Krl BBS «Sol. (8. 10) 
称 解 1c } 为 最 大 解 ， 但 必须 记 住 : 在 许多 情况 下 ， 一切 o; 二 0， 我 们 把 这 些 结果 综述 
成 下 面 的 : 
aR ste Meee Q 而 言 ， 线 性 方程 组 (8.9) 给 出 了 一 组 具有 性 质 (8.10) 
的 最 大 解 {o;}， 这些 co 是 Q" 的 行 和 的 极限 ，. 
ME, EWH P 的 这 样 一 些 元 素 加 构成 的 子 和 矩阵 : 其 中 ME, 都 是 常 返 状 
态 ， 这 样 ， 线 性 方程 组 (8.9 可 以 写成 
x; 一 = 2P: tyr GET, (8. 11) 


其 中 的 求 和 号 是 对 一 切 使 E, YARRAK v KRA. 在 这 种 辨识 下 ，o:” 是 从 初始 
IRAE, 出 发 在 前 次 试验 中 未 转移 到 常 返 状 态 的 概率 . 因此 ， 极 限 e BRE 出 发 从 
未 转移 到 常 返 状态 的 概率 ， 所以， 有 

定理 1 从 下 出 发 ， 系 统 永远 停留 在 暂 留 状态 中 的 概率 zi 是 方程 组 〈8. 11) 的 
最 大 解 . 

用 同样 的 推理 可 人 得: 
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准则 在 一 个 具有 状态 E ,了 上 的 不 可 约 的 - 马尔 可 夫 链 中 ， 状态 Eo ÆR 常 返 状 
态 的 充分 必要 条 件 是 线性 方程 组 


n= >) pers, i 之] (8. 12) 


RTE x, =0 OY — 1) 以 外 ， 没有 满足 条 件 Srl WK. 
证 邻 Q 是 引 理 中 的 把 P 的 对 应 于 上 。 的 行 和 列 都 去 掉 而 得 的 子 和 矩阵 ， 定 理 1 中 
的 推导 表明 ，so; 《从 初始 状态 E 出 发 ) 是 系统 水 还 留 在 状态 Fi ,FE;,… 中 的 概率 ， 但 
E, WR E ERIKA, WEA E, 的 概率 fi 二 1]， 从 而 对 一 切 i A o5 0. > 
例 (d) 和 第 7 A Cb) — FF, 考虑 一 个 具有 状态 E, Es WE BONS 

的 链 : 

px = 0,4 | 一 7 之 1 时 ， (8. 13) 
为 了 避免 一 些 不 足 道 的 事情 ， 假 定 pj;.j-1 隆 0，pj;j-1 关 0， 因 为 由 任 一 状态 可 以 到 达 其 
他 任 一 状态 ， 所 以 链 是 不 可 约 的 ， 从 而 所 有 状态 都 是 同一 种 类 型 的 ， 故 只 需 检 验 Eo 

这 一 个 状态 的 性 质 就 够 了 . 方程 组 (8. 12) 化 为 下 列 递归 方程 组 
X= puat F per (8. 14) 

Pi jp — Ta) = pm (jer TD og 之 2 


因此 ， 
zy — ty; = Babe ber — mp), (8. 15) 
因为 bpo >0, 所 以 rır 0; ATERATEA {xi} 的 充分 必要 条 件 是 
Pa’ „}— l OO 
> Don i p <, (8. 16) 


链 是 常 返 的 充分 必要 条 件 是 上 述 级 数 发 散 . 在 随机 徘徊 的 特殊 情况 下 ， 我 们 有 Pij 
= p, p; -1 7q X — Uj >l 成 立 ， 从 而 再 一 次 看 到 ; 状态 是 常 返 的 充分 必要 条 件 是 p 
二 g，( 此 链 可 解释 为 直线 上 的 随机 徘徊 ， 但 其 从 一 个 位 置 转移 到 另 一 个 位 置 的 概率 
随 位 置 而 变化 , ) 

(e) 对 第 2 节 例 (1) 中 的 和 矩阵， 方程 组 (8.12) 化 为 : 

T; = Poi Tn (8.17) 

个 循环 事件 8, Ap 由 (2.5) 给 出 ， 则 上 述 无 穷 乘积 收敛 的 充分 必要 条 件 是 . 
Dh<co, Fuk (GE 如 期 望 的 那样 ) 链 和 8 或 者 两 者 都 是 常 返 的 ， 或 者 两 者 都 是 暂 留 的 . 

为 了 回答 本 节 提 出 的 最 后 一 个 问题 ， 再 一 次 地 令 了 为 全 体 暂 留 状 态 所 构成 的 集 
合 ， 而 C 是 任意 一 个 由 常 返 状态 构成 的 闭 集 ，( 不 要 求 C 是 不 可 约 . ) 令 yi 是 从 初始 
状态 巨 ; 出 发 最 终 被 吸收 到 C 内 的 概率 ,我们 要 证 明 y: 满足 非 齐 次 方程 组 : 


1. 不 可 约 性 的 假设 是 为 了 避免 符号 的 复杂 ， 并 不 造成 任何 限制 ， 因 为 只 需 考虑 Eo WAER. 顺便 
指出 ,准则 对 周期 链 也 成 立 . 
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y: = 2 Pay. + Ypa EET, (8. 18) 
j C 


上 述 两 个 求 和 号 分 别 是 对 满足 EETHE, ECH RKM. 方程 组 (8.18) HAEA JL 
组 独立 的 解 ， 但 是 ， 下 面 的 证 明 将 揭示 在 这 些 解 中 ， 存 在 一 组 类 似 于 《8.10) ME 
义 的 最 小 的 解 . 
定理 2 最 终 被 吸引 到 闭 的 常 返 状态 集合 C 的 概率 yy 是 (8.18) 的 最 小 非 负 解 . 
证 4 y” 是 第 n 步 以 前 OBB nH) 被 吸收 到 C 的 概率 ， 则 对 一 切 ”之 1 显 
然 有 
y= = Upay + di Ps (8. 19) 


如 果 令 yO=o0 (对 一 切 v)， 则 (8.19)〉 对 2 一 0 也 成 立 ， 对 固定 的 i,(yi”} 是 非 降 的 ， 
HAF 1， 其 极限 显然 满足 (8.18). RZ, A ly} 是 (8.18) 的 任意 一 组 非 负 解 ， 
由 于 (8.18) 的 第 二 个 和 等 于 y”, ， 所 以 y; 宇 y，”， 用 归纳 法 可 证 y; 之 y:” 对 一 切 n 成 
立 ， 从 而 y'” 的 极限 是 一 组 最 小 解 . 

解释 见 例 Cc). > 


“15.9 周 期 链 


周期 链 不 难处 理 ， 也 不 会 提供 一 些 想像 不 到 的 新 特色 . 它们 之 所 以 被 排除 在 第 
15.7 节 的 主要 定理 的 表述 之 外 ， 仅 仅 是 因为 对 它们 不 太 感 兴趣 ， 而 且 描 述 起 来 又 顾 
费 笔墨 ， 这 一 节 对 它们 的 讨论 ， 与 其 说 对 它们 感 兴趣 ， 倒 不 如 说 是 为 了 完整 性 .这 
一 节 的 结果 以 后 也 不 会 用 到 . 

最 简单 的 具有 周期 为 3 的 链 的 例子 是 : 此 链 具 有 3 个 状态 ， 而 且 仅 仅 对 E> 
E >E >E, 这 样 的 转移 才 是 可 能 的 ， 这 时 有 


0 1 0 0 0 1 1 0 0 
= |0 0 11,P=]1 0 01,,P = {0 1 0j. 
1 0 0 0 1 0 0 0 1 


我 们 将 证 明 这 个 例子 在 许多 方面 都 具有 典型 意义 ， 

考虑 一 个 不 可 约 的 具有 有 限 或 无 穷 多 个 状态 E, E ，… 的 链 ， 由 定理 6. 1 A: 
所 有 状态 都 具有 相同 的 周期 :假定 :>1)， 因 为 从 不 可 约 链 的 任何 一 状态 可 以 到 达 
任何 一 个 其 他 的 状态 ， 所 以 对 每 一 个 状态 E; d 存在 两 个 整数 a 和， 使 得 pik 一 和 和 
p>0. (AE ppp, Am ato 一定 能 被 1 整除， 固定 5， 我 们 断言 : 使 得 
po ->0 的 每 一 个 整数 a， 都 能 表 成 a 十 wt 的 形式 ， 其 中 a 是 满足 Sat HELENS 
S. BH a 是 状态 EE 的 特征 ， 所 以 全 部 状态 可 以 划分 为 1 个 互 不 相交 的 类 Goes 
Gio THE. 

除了 n=atut WI, BA 

E, E€ G>pp = 0. (9.1) 


"15.9 Fl 期 # 307 


如 果 我 们 想像 Gi ,…,C 循环 排序 ， 则 G- E C 的 左 邻 域 . 

显然 ， 通 过 一 步 ， 只 能 转移 到 其 右边 的 与 之 相 邻 的 类 中 一 个 状态 ， 因 此 ， 一 个 
ti 步 构成 的 路 径 总 是 把 一 个 状态 转移 到 同一 类 的 一 个 状态 ， 此 事实 蕴涵 了 : 对 具有 转 
PEE P' 的 马尔 可 夫 链 来 说 ， 每 一 个 G, 都 构成 一 个 闭 集 ' .此 集合 是 不 可 约 的 ， 因 
为 原始 链 的 每 一 个 状态 能 到 其 所 在 的 类 的 任 一 状态 所 要 求 的 步 数 必须 能 够 被 i 整除 . 
因此 ， 证 明了 

定理 ”对 一 个 不 可 约 的 周期 为 1! 的 链 来 说 ， 其 全 部 状态 能 分 解 成 + 个 互 不 相交 的 
满足 (9.1) 的 类 Go,,"…',G,1， 而 且 一 步 转移 只 能 把 一 个 状态 转移 到 其 右边 的 邻 类 中 
的 一 个 状态 (特别 地 ， 从 G, 1 到 Go)， 对 于 具 转 移 和 矩 阵 P' 的 链 来 说 ， 每 一 个 类 G 都 
对 应 着 一 个 不 可 约 的 闭 集 . 

应 用 这 个 定理 ,很 容易 描述 转移 概率 ps? 的 渐 近 性 质 ， 我 们 知道 ， 当 E, 是 暂 留 
状态 或 常 返 的 零 状 态 时 ，p'? 一 0， 而且 全 部 状态 都 是 同一 类 型 的 〈 见 第 6 节 )， 因 
此 ， 我 们 只 需要 考虑 每 个 状态 E 都 有 有 限 的 平均 循环 时 间 yi 的 情形 ， 关 于 具有 转移 
矩阵 P'S, E, 具有 平均 循环 时 间 jy/t， 且 相对 于 此 链 来 说 ，G, BH. A, 
当下, 属于 G。 WA: 

and t/ pp 4 E, EG, 
jmpi 一 0 其 他 情况 nan 
对 类 G, 的 状态 来 说 ， 权 ti/y 定义 出 一 个 概率 分 布 〈 见 第 7 节 中 的 定理 )， 因 为 有 上 个 
这 样 的 类 ， 与 非 周期 链 一 样 ， 数 列 wu 二 1/p 在 整数 上 定义 出 一 个 概率 分 布 ， 下面 证 
明 此 分 布 是 不 变 分 布 ， 为 此 目的 ， 我们 需要 ， 当 指数 不 能 被 周期 1 整除 时 ，(9. 2) A 
对 应 的 关系 式 . 
从 下 述 基本 关系 式 开始 : 


pr? = > pO pg. (9. 3) 


除了 EE, 在 Gs 以 外 C4 at Berit, 把 GN Gad) AT pe =0. 而 当 ,在 
G,..pit, BE, AEG... WA p29 二 0， 所 以 ,对 固定 的 8 和 G。 中 的 状态 上 上;， 
A: 
. t/ ps Ee © Gag 
l 一 (9.4) 
pre 0， 其 他 情况 
现在 ， 把 (9. 3) 再 写成 


per? = Sl pe? pa. (9.5) 


1. 当 t=3 时 ， 有 三 个 类 ， 若 用 第 4 节 引 进 的 矩阵 分 块 表示 法 ，P 有 下 列 形式 : 


0 
0 
C 


D OO p 


o Ww o 
~、 


此 处 A XR Go 到 Gi 的 转移 概率 矩阵 ， 等 等 
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考虑 任意 一 个 状态 及， 且 令 G, 是 含 E; ARTE. RT EEG 以 外 ， 总 有 pu 50. 
所 以 当 EEG, 时 ，(9.5) 两 边 都 等 于 0. 在 此 情况 下 有 : po? tu, Hi4 

u = >》 UPa. (9. 6) 
由 于 Ey 是 任意 一 个 状态 ， 所 以 我 们 证 明了 概率 分 布 {u } 是 不 变 的 ， 


15.10 ”在 洗 牌 中 的 应 用 


一 副 编号 为 1,2,…,NN 的 NN 张 牌 ， 能 排 成 N! 种 不 同 的 次 序 ， 每 一 种 次 序 表示 
系统 的 一 个 状态 ， 每 次 洗 牌 把 现存 的 状态 转移 到 某 个 其 他 状态 .例如 ,“ 错 牌 ”把 次 
FE (1,2,…,N) ARE (7,r 十 1,…,N,1,2,r 一 1) 的 循环 等 价 次 序 之 一 ， 而 逆序 
经 错 牌 后 则 变 成 (N 一 r 十 1,N 一 r,… ;N,N 一 1,…,N 一 r 十 2)， 换 句 话 说 ， 把 洗 牌 看 
成 是 转移 : 一 EE， 如 果 同 一 种 洗 牌 方式 重新 进行 ， 则 系统 (从 给 定 的 状态 E 出 
发 ) 依次 经 过 一 系列 状态 以 后 ， 在 有 限 步 后 还 原 为 原来 的 次 序 ， 从 那 时 以 后 ， 同 一 
系列 接连 的 状态 将 周期 地 重复 出 现 ， 对 大 多 数 洗 牌 方式 来 说 ， 周 期 是 相当 小 的 ， 并 
不 是 所 有 的 状态 都 能 由 这 种 程序 所 达到 : ， 例如， 一 次 精确 的 “ 插 牌 ”把 2m TRO, 
… ,2m) 恋 成 A,m+1,2,m+2, m, 2m). XIF 6 张 牌 来 说 ，4 次 精确 的 插 牌 就 能 恢 
复原 来 的 次 序 ， 对 于 10 张 牌 来 说 ，6 次 精确 的 揪 牌 就 能 恢复 原来 的 次 序 . 所 以 ， 对 10 
张 牌 ， 重 复 地 进行 精确 的 插 牌 ， 仅 能 得 到 10! = 3 628 800 种 可 能 次 序 中 的 6 种 . 

实践 中 ， 玩 牌 者 或 许 会 希望 改变 洗 牌 方式 ， 但 无 论 如 何 ， 随 机 性 总 会 导致 偶然 
变化 ， 假 定 能 够 通过 每 种 特殊 的 洗 牌 方式 有 特定 的 概率 〈 可 能 为 0) 来 说 明 玩 牌 人 的 
习惯 和 随机 性 的 影响 ， 关 于 这 些 概 率 的 数值 无 需 作 任何 假定 ， 但 假定 玩 牌 人 洗 牌 时 
不 考虑 过 去 的 情况 ， 也 不 知道 牌 的 次 序 : .这 意味 着 ， 接 连 的 洗 牌 对 应 着 一 串 具 有 国 
定 概 率 的 独立 试验 ， 因 此 ， 对 一 副 牌 我 们 可 以 导出 一 个 马尔 可 夫 链 . 

现在 我 们 证 明 ， HEARE P 是 一 个 二 重 随机 矩阵 [第 7 节 例 Ch). 事实 
上 ， 如 果 一 次 洗 牌 把 状态 E, ( 牌 的 次 序 ) 变 为 状态 及， 则 存在 另 一 状态 EF,， 由 它 可 
以 变 为 EE， 这 意味 着 ， 除 了 次 序 不 同 以 外 ，P 的 第 7 列 的 元 素 们 与 第 j 行 的 元 素 们 征 
一 样 的 ， 所 以 了 的 每 一 列 的 元 订 的 和 为 1. 

由 此 推出 : 不 可 能 有 暂 留 状态 .如 果 链 是 不 可 约 的 和 非 周期 的 ， 则 在 极限 情形 ， 
所 有 状态 都 是 等 可 能 的 ， 换 句 话 说， 任何 一 种 洗 牌 方式 ， 只 要 它 产生 的 链 是 不 可 约 
的 和 非 周 期 的 ， 都 是 可 行 的 ， 可 以 假定 通常 情况 如 是 ， 不 过 ， 若 设 牌 共有 偶数 张 ， 
并 约定 洗 牌 的 方式 是 : 先 把 它们 分 成 两 组 ， 再 用 任意 方法 分 别 地 洗 这 两 组 牌 ， 最 后 
把 这 两 组 牌 按 它们 的 原来 的 次 序 并 在 一 起 ， 则 得 到 的 马尔 可 夫 链 是 可 约 的 . 〈 因 为 ， 


1. 用 群 论 的 语言 来 说 ， 这 相当 于 说 置换 群 不 是 循环 的 ， 因 而 不 能 由 一 个 简单 运算 产生 . 
2 这 个 假设 对 应 于 桥牌 中 的 通常 情况 .容易 设计 出 更 复杂 的 洗 牌 方式 ， 使 每 次 洗 牌 的 方式 依赖 于 以 前 
的 洗 牌 方式 ， 在 这 种 情况 下 ， 最 后 得 到 的 不 是 马尔 可 夫 链 [参见 第 13 PA o]. 
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不 是 每 一 个 状态 都 能 由 每 一 个 其 他 状态 到 达 . ) 如 果 两 组 的 次 序 颠 倒 ， 则 链 有 周期 2. 
因此 ， 理 论 上 ， 两 种 偶然 情况 都 可 能 发 生 ， 但 在 实践 中 却 难 操作 ， 因 为 随机 性 妨碍 
了 完善 的 规则 性 . 

已 经 看 到 :可 以 期 望 连 续 不 断 的 洗 牌 ， 会 生成 完全 的 “随机 性 ”并 消除 原始 次 
序 的 痕迹 然而， 应 当 指 出 : 为 此 所 需 的 洗 牌 次 数 是 极 大 的 ， 


“15.11 不 变 测 度 。 比 率 极 限定 理 


在 这 一 节 中 ,我们 将 研究 具有 常 返 的 零 状 态 的 不 可 约 的 链 ， 主 要 的 目标 是 推出 : 
类 似 于 第 15.7 节 中 所 得 到 的 关于 具有 有 限 平均 循环 时 间 的 链 的 结果 .此 类 链 的 一 个 
凸 出 的 性 质 是 存在 不 变 〈 或 平稳 ) 概率 分 布 : 

u, = > UPvr- (11.1) 


我 们 知道 ， 当 平均 循环 时 间 是 ce 时 ， 这 种 不 变 概 率 分 布 不 存在 ， 但 是 ， 我 们 将 要 证 
明 ， 线 性 方程 组 (11.2) WEA WE D u =H EHRE u). 这 样 的 {wu} 称 为 不 变 
(或 平稳 ) 测度 ， 如 果 链 是 不 可 约 的 常 返 的 ， 则 除了 任意 一 个 EE 则 化 常数 因子 以 外 ， 
不 变 测 度 是 惟一 的 . 

例 (a) 假 定 转移 概率 矩阵 P 是 二 重 随 机 的 ， 即 是 ， 每 一 列 之 和 也 如 每 一 行 之 和 
一 样 ， 都 等 于 1， 则 ALD AM uw 二 1 (对 一 切 )， 这 个 事实 可 表述 为 : 一 致 ( 均 
匀 ) 测度 是 不 变 的 . 

(b) 随 机 徘徊 ， 直 线 上 的 无 限制 的 随机 徘徊 是 一 个 有 趣 的 特例 ， 我 们 将 其 状态 按 
其 自然 次 序 从 一 co 到 co 标号 ， 这 虽然 妨害 展示 转移 概率 矩阵 的 标准 形式 ， 但 是 ， 改 
恋 一 下 符号 就 行 ， 如 果 质 点 向 右 和 向 左 邻 域 转移 的 概率 分 别 为 如 和 qg， 则 《11.1) 化 
为 下 述 形式 : 

Up = pupi T UMass 一 co << k<, 


RAM p=q= 方 ， 其 状态 才 是 常 返 的 ， 而 这 时 wu 二 1 是 惟一 的 正 的 解 ， 当 pqi, 


前 述 wu 还 是 ALD 的 解 ， 只 不 过 这 时 解 不 惟一 而 已 ，w 二 (p/g)* 是 它 的 第 二 组 非 
负 解 ， 这 个 例子 说 明 : 对 暂 留 链 ， 不 变 测 度 也 是 存在 的 ， 只 不 过 不 一 定 惟一 而 已 . 
在 下 一 节 中 ， 我 们 还 将 回 到 这 一 有 趣 的 问题 . 

不 变 测度 {wu} 可 作 如 下 的 直观 解释 ， 同时 考虑 无 穷 多 个 具有 相同 的 转移 概率 矩阵 
P 的 过 程 ， 对 每 个 j， 定 义 一 个 服从 其 有 均值 w 的 泊 松 分 布 的 随机 变量 Ni ， 并 考虑 


1. 关于 洗 牌 问题 的 有 关 实 验 记录 中 的 一 个 极为 初等 的 结果 的 分 析 ， 可 参见 文献 L100J， 在 文献 L100 | 
所 在 的 杂志 的 第 299~319 页 中 ， 格 林 伍 德 (Greenwood) 和 斯 图 尔 特 (Stuart) 试图 证 明 这 些 结果 
是 由 随机 因素 引起 的 .他 们 的 数学 和 实验 都 有 不 同 的 超然 的 味 违 . 

x 以 下 二 节 研 究 的 主题 在 当代 研究 中 很 重要 ， 但 其 结果 ， 此 书 以 后 不 会 应 用 . 
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N PME; 出 发 的 独立 的 过 程 . 对 一 切 状 态 ， 均 仿 上 构造 过 程 ， 并 设 所 有 这 些 过 程 都 
是 相互 独立 的 .不 难 证 明 : 在 每 个 给 定 的 时 刻 ， 只 有 有 限 个 过 程 处 于 任 一 给 定 的 状 
AS E 的 概率 为 1， 因此， 在 第 2 步 处 于 状态 五 的 过 程 的 个 数 是 一 个 随机 变量 Xi ， 
mM Alu} REHAT: EXL)Su Gh n). (参见 习题 29) 

(c) 在 第 1.7 TR D 中 ,我 们 发 现 只 有 当 级 数 (7.21) 收敛 时 ， 不 变 概率 分 
布 才 存 在 ， 对 发 散 的 情形 ， 只 要 ww 一 0， 即 是 pipe pd, (7.20) 仍然 是 不 变调 
度 ， 当 乘积 peep 始终 大 于 某 个 正 数 时 ， 例 如 当 p=1- RTD 时， 不 变 测度 不 
存在 ， 在 此 情况 下 ， 链 是 和 暂 留 的 . 

(d) 在 第 15.7 节 例 (g) 中 ， 甚 至 当 vom, KAR (7.23) 仍然 定义 出 一 个 
不 变 测度 . > 

对 遍历 链 而 言 ， 概 率 pi? 趋 于 不 变 概率 分 布 中 的 一 项 ， 对 常 返 的 零 链 而 痛 ， 我 们 
将 证 明 此 结果 的 一 个 较 弱 的 形式 ， 即 当 N->co 时 ， 对 一 切 E, ME, A: 


N 
> pe 
me oi, (11. 2) 
Sep ” 
J 


左边 的 两 个 和 分 别 表 示 : BNR, ADE WE, Re. AR. 
(11.2) 表示 这 些 期 望 值 与 初始 状态 E MIE, 独立 ， 而 且 与 不 变 测 度 中 的 对 应 的 项 的 
比例 也 一 样 ， 因 此， 一 些 显著 的 事实 与 遍历 链 的 场合 是 一 样 的 ， 只 不 过 形 陈 较为 复 
杂 一 些 ， 另 一 方面 ， 周 期 链 不 需要 特殊 考虑 ， [事实 上 ，(11.2) 涵盖 了 所 有 的 常 返 
链 ， 对 于 遍历 链 ， 左 边 的 分 子 一 Na. J 

形 如 (11.2)〉 的 关系 式 统 称 为 比率 极限 定理 .我 们 将 从 一 个 更 强 的 结果 推出 
(11.2)， 此 结果 的 更 复杂 更 精密 的 推广 ， 现 在 还 有 人 在 研究 .按照 钟 开 莱 的 称 法 ， 
我 们 称 禁 止 去 的 状态 E, 是 禁忌 的 〈taboo) ， 并 称 到 它 的 转移 概率 为 荣 辟 概率 . 

定义 令 已 是 任意 一 个 固定 的 状态 ， 对 于 任何 EAE, Pnl, ZLPE 是 从 
E, 出 发 于 第 n PaE, MÆR n PARARE E, ORS. 

EALE MSE, 相同 .我 们 用 下 述 自然 的 方法 把 此 定义 延 拓 到 E = E, 和 2 一 0: 


by = 0 (n = 1) (11.3) 
和 
pO = SEE. (11. 4) 
0, 反 之. 
分 析 诸 项 ， 对 n0 M EAE, A: 
DEY = 之 PR Pa. (11.5) 


吉 详 上 ， 当 )-0 时， 右边 的 和 化 为 一 项 py. 4 oe, fe OLD, HAF vsr 
的 项 为 0， 所 以 (11.5) 等 价 于 原始 定义 
将 EE 作为 桂 忌 状态 引进 来 ， 等 于 我 们 仅 考虑 原始 的 马尔 可 夫 过 程 到 第 1 次 进入 
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E, 为 止 ， 对 不 可 约 链 而 言 ， 从 任何 一 个 初始 状态 E, 迟早 要 进入 FE, 的 概率 为 1， 由 此 
推出 ， 对 一 个 具有 禁忌 状态 E, 的 链 ， 接 连 地 经 过 初始 状态 ,构成 了 一 个 暂 留 的 循环 
事件 ， 而 经 过 任何 其 他 事件 ELSE, 构成 一 个 迟延 的 暂 留 的 循环 事件 ， 央 此 ， 当 下 天 
EL 时 ， 由 第 13. 3 节 基 本 定理 2 Æ.: 


21 Pi =,x < co (11.6) 
对 E,=E,, (11.6) 左边 的 加 项 当 ”之 1 时 为 0， 从 而 和 化 为 1 或 0 由 7 一 ”> 或 了 7 天 > 
而 定 ， 
现在 我 们 该 证 明 不 变 测度 的 存在 性 了 ， 即 是 说 ， 证 明 满 足 (11.1)〉 的 数 wu 的 存 
在 性 . 这 在 定理 2 的 证 明 中 并 不 用 到 . 
定理 1 如 果 链 是 不 可 约 的 而 且 是 常 返 的 ， 则 数列 
up, = Tp (11. 7) 
Hy — SR EME, wes, h k A u> Bul, 
反之 ， 若 对 一 切 上 有 uz mE ALD, MRE-+FRA, Hu=A+ te. 
此 处 E, 是 任意 的 ， 但 惟一 性 的 论断 蕴涵 了 对 各 种 不 同 的 7 所 得 到 的 序列 {wu} 
只 差 一 个 常数 倍 ， 注 意 ， 此 定理 及 其 证 明 涵 盖 了 具有 有 限 的 平均 循环 时 间 的 链 . 
证 WR kr, RA =r 用 11.5). 对 n= 二 0，1，…* 求 和 得 到 


Ne= >) RuPas (11. 8) 
所 以 ， 数 列 ALD 至 少 对 kár HR ALD. MF i=k=r, BR 
2 Pe Pe 一 C11. 9) 


等 于 〈 原 始 链 ) 在 第 n-+1 步 第 1 次 返回 E 的 概率 ， 因 为 链 是 不 可 约 而 且 是 常 返 的 ， 
这 些 概率 加 起 来 等 于 1， 把 〈11. 9) 对 n=0, 1, ORAM, 47 


Xi aaepe 一 1， (11. 10) 


但 是 ， 由 定义 知 ,x; 二 1， 从 而 (11.8) 对 =r 成立， 因此 (11.7) 是 一 个 不 变 测度 . 
其 次 ， 考 虑 任意 一 个 非 负 不 变 测度 (w) BEX (11.1) 显然 可 知 : WRIA 
个 有 wi 二 0， 则 对 一 切 满足 pi >O 的 v， 都 有 二 0， 用 归纳 法 可 证 ， 对 一 切 能 到 达 
E, 的 E,， 都 有 4 一 0。 当 链 是 不 可 约 链 时 ， 这 蕴涵 了 对 一 切 v 都 有 ,二 90， 因此 , 不 
变 测度 是 严格 正 的 (或 者 恒 为 0). 
因此 对 于 定理 的 逆 部 分 ， 可 以 假设 给 定 的 不 变 测度 满足 正则 化 条 件 wu 二 1， 其 中 
r 是 事先 规定 的 ， 所 以 
Up = Per 十 > ujpa. (11. 11) 


假定 kAr. 我 们 把 求 和 号 中 的 uy 按 定义 的 关系 式 LD 表示 ， 并 再 一 次 在 二 重 求 
和 号 中 将 含有 u 的 项 分 离开 来 ， 这 样 就 得 到 了 : 
u = Pa t PP Du "pH C11. 12) 
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按 些 方式 继续 施行 ， 易 知 对 任何 半 有 


一 py tp? 十 … +p? 十 Dies pP. (11. 13) 
& noon] Í$ une. 由 此 推出 ，( 一 x 定义 了 一 AY AS AB FE. TEE R= 时 为 
0. 但 是 ， 这 种 测度 恒 为 0， 所 以 11.7) 成 立 . > 


我 们 马上 要 看 到 ， 下 面 的 定理 比比 率 极限 定理 更 有 用 . 
定理 2 对 不 可 约 的 常 返 的 链 而 言 ， 对 一 切 NN 有: 


<D- Doe SA (11. 14) 
和 本 
< lip < (11. 15) 
证 ” 先 证 (11.14). 考虑 第 1 次 进入 E, 易 见 ， 当 a 关上 时 有 : 
px = SFP pL. (11. 16) 
-这 与 (5. 3) 是 一样 的 . ] 对 n 求 和 得 
> pe < > pie se = = > po， 1.17) 


这 就 证 明了 (11.14) 的 第 1 个 不 等 式 . 
注意 : 从 E, 出 发 ， 返回 E, 有 两 种 方式 : 一 种 是 返回 E, BARAT E,; 万 一 种 
BE vi Uxsv<n) 第 1 经 过 下 .因此 


PP =, PL + Dd SES”. (11. 18) 
v=] 


对 nn 求 和 即 得 (11. 14)〉 的 第 2 个 不 等 式 . 
再 证 (11. 15)， 由 于 ; 和 7 的 地 位 对 称 ， 故 只 需 证 明 第 2 个 不 等 式 ， 我 们 从 下 面 
等 式 开始 ， 
pP =p 十 2 pyr? epi” (11. 19) 
此 等 式 表示 : M E RE E;, 或 者 中 间 不 经 过 E; 或 者 最 后 一 次 进入 五 出 现在 第 
n 一 J 步 而 其 后 的 v HEE, BIE, 昌 中 间 不 经 过 EE)， 对 nn 求 和 并 应 用 (11. 14) 得 : 
> py Ka Hj > pi Syma tns > pi . (11. 20) 
把 此 不 等 式 置 于 〈11. 15) 的 对 称 形式 ， 只 需 证 明 
jiji = me (11.21) 
jTi 
则 定理 得 证 .事实 上， 用 类 似 于 01.16 的 表示 可 得 : 
TT ji =f ii * Ni (11. 22) 
He (EME, HAP AIRE E, 而 到 达 E; WRR. EFOR E: Be E 
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AEALBIAE, 以 前 ， 所 以 


fj; =1—f; = +, (11. 23) 


(最 后 这 个 方程 是 下 述 暂 留 循环 事件 的 基本 恒等式 ， 此 循环 事件 由 返回 E; 但 中 间 不 
经 过 五 . 而 构成 .) 把 (11.23) 代入 (11.22) BUF (11.21)， 这 就 完成 了 定理 的 
证 明 . > 
KAR (11.21) 可 推出 一 个 有 趣 的 
系 1 wR tu} 是 一 个 不 变 测 度 ， 则 


Di c, (11. 24) 


证 ”因为 不 变 测 度 差 一 个 常数 倍 是 惟一 决定 的 ， 所 以 〈11. 24) 右边 的 数 是 惟一 
REH. BE, AERA ESE 时 ， 可 以 假设 (uy) 是 由 (11.7)〉 所 定义 的 不 变 
测度 .但 是 ww 二 1 Hramu, ih (11.21) 可 推出 (11. 24). > 

系 2 (比率 极限 定理 ) 对 任何 不 可 约 的 且 常 返 的 链 来 说 ， 比 率 极限 定理 
(11.2) AŽ. 

iE 4 N>, H 2 的 和 都 趋 于 =e. Alb, 1114) 中 的 两 个 和 之 比 趋 于 
1， 所 以 为 证 〈11. 2)， 只 需 对 a=i 和 8=j 的 特殊 情况 来 证 明 就 够 了 ， 然而， 这 样 特 
PEA a FB, (11.2) 可 以 立即 从 (11.15) 和 “(11. 24) 而 得 到 . > 

常 返 链 的 不 变 测度 的 存在 性 ， 最 早 是 由 德 曼 在 1954 年 证 明 的 ， 而 (11.2) 中 的 
极限 的 存在 性 是 由 杜 勃 林 在 1938 年 论证 了 的 .禁忌 概率 ， 作 为 马尔 可 夫 链 理论 的 一 
个 有 力 的 工具 ， 是 由 钟 开 菜 在 1953 年 引进 来 的 ， 进 一 步 的 详细 的 讨论 ， 可 参见 他 的 


重要 的 专著 [1011] 的 第 一 部 分 . 部 分 和 Dd, (pi 一 p) WA ATA RAR 
(S. Orey) 证 明 的 ， 他 还 研究 了 收敛 性 问题 ， 参 见 [102]. 
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在 研究 系统 的 发 展 趋势 时 ， 我 们 通常 只 对 可 能 的 未 来 事件 的 概率 感 兴趣 ， 但 是 ， 
研究 过 去 偶尔 也 是 必要 .对 马尔 可 夫 链 来 说 ， 在 一 些 特殊 情况 下 ， 我 们 可 以 回 : 给 
定 现在 的 状态 是 EE， 在 过 去 某 一 时 刻 系统 处 于 状态 E; 的 (条 件 ) 概率 是 多 少 ? 

首先 考虑 一 个 具有 严格 正 的 不 变 概率 分 布 (a) 的 链 ， 即 是 假定 uy >O Bly, 
二 1， 此 处 

u = X upa. (12.1) 


[ 记 住 : 由 第 15.7 节 中 的 定理 知 ， 不 可 约 链 的 不 变 概率 分 布 自然 是 严格 正 的 . J 


1. 该 专著 的 第 二 版 还 包含 了 边界 理论 . 〈 但 此 书 的 符号 与 [101] 中 所 使 用 的 符号 不 尽 相 同 . ) 
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如 果 过 程 以 (ws) 和 作 初 始 分 布 出 发 ， 则 在 任 一 时 刻 系 统 处 于 状态 E 的 概率 都 是 
i， 给 定 这 一 事件 ，n 个 时 间 单 位 以 前 系统 曾经 处 于 状态 EF; 的 条 件 概率 等 于 ， 


pi? 
qy = “ibi (12.2) 
wW nan=l, A 
q, = Hi, (12. 3) 


由 (12.1) 易 见 ，9; 是 一 个 随机 和 矩阵 Q BER. Eh, WR qi?” 是 nn 方 8" RR 
( 换 句 话说， 用 由 p; 算 出 p” 的 同样 的 方法 ， 可 以 由 qj 算出 gq:?)， WE, RRI 

ee ee eee ee en. 可 夫 链 的 研究 ， 当 然 ， 新 
器 以 不 变 概率 分 布 ; 作为 绝对 概率 分 布 ， 称 概率 q 为 逆 概 率 〔( 相 对 于 原来 的 
EA EDE EA 的 特殊 情形 下 ， 称 此 链 是 
可 逆 的 ， 对 此 类 链 ， 其 概率 关系 关于 时 间 是 对 称 的 ， 

我 们 知道 ， 对 一 个 不 可 约 链 而 言 ， 只 有 当 其 一 切 状态 都 具有 有 限 的 平均 循环 时 
间 时 ， 才 存在 不 变 概 率 分 布 ， 如 果 所 有 的 状态 都 是 常 返 的 零 状态 ， 则 除了 一 个 背 数 
倍 以 外 ， 存 在 惟一 一 个 不 变 测度 .对 于 一 个 暂 留 链 ， 一 切 情况 都 是 可 能 的 : 某 些 链 
没有 不 变 测度 ; 另 一 些 有 无 穷 多 个 . [第 11 节 例 (b) 和 例 〈c). ] 在 这 些 情况 下 ， 值 
得 注意 的 是 ， 当 {wu,) 是 一 个 严格 正 的 不 变 测度 时 ， 变 换 (12.3) 定义 出 一 个 随机 筹 
阵 QO，0Q 的 方 赛 由 (12. 2〉 所 给 出 ， 在 这 种 意义 上 ， 每 一 个 严格 正 的 不 变 测 度 定义 出 
一 个 逆 马 尔 可 夫 链 .遗憾 的 是 ， 新 的 转移 概率 9; ， 不 能 直接 解释 为 原来 的 过 程 的 条 
件 概率 . 

考察 一 下 (12.3)， 立 刻 发 现 ‘wu; 也 是 首 链 的 不 变 测 度 ， 此 外 ， 由 (12.2) | 


见 ， 下 列 两 个 级 数 Dla? A Dp,” ， 或 者 都 收敛 ， 或 者 都 发 散 ， 由 此 推出 ， 此 二 链 


的 状态 属于 同一 种 类 型 ， 只 要 一 个 链 是 暂 留 的 或 常 返 的 ， 则 另 一 个 链 也 一 样 

Gl (a) 对 应 于 埃 伦 费 斯 特 模 型 [第 2 节 例 (e)] 的 不 变 概 率 分 布 由 (7.16) 给 
出 ， 简 单 计算 表明 : 埃 伦 费 斯 特 模型 在 qi 二 pi 意义 下 在 可 送 的 . 

(b) 在 第 11 节 例 (b) 中 ， 我 们 找 出 了 对 应 于 直线 上 的 随机 徘徊 〈 它 向 右 或 同 左 邻 
域 转移 的 概率 分 别 为 p 或 g) 的 不 变 测度 ， 如 果 我 们 对 一 切 整数 & 都 取 几 一 1， 则 q 
二 p,,， 从 而 得 到 一 个 新 的 随机 徘徊 ， 其 中 p 和 g 所 处 的 地 位 与 在 原 随机 徘徊 的 地 位 
互 换 ， 另 一 方面 ， 逆 链 与 原 链 的 不 变 测度 都 是 u= D. 

(c) 在 第 2 节 例 (k) 和 例 (D) 中， 关于 循环 事件 8 ， 引 进 了 两 个 马尔 可 夫 链 . 对 
于 常 返 的 具有 有 限 的 平均 循环 时 间 yy 的 8， 我 们 在 第 7 节 例 (g) 中 发 现 : 此 二 链 其 
有 由 (7.23) 给 出 的 相同 的 不 变 概率 分 布 ， 当 pr 一 ce 时 ， 这 些 关 系 式 给 出 了 此 二 链 
的 公共 不 变 测 度 ，[ 见 第 11 节 例 (c) 和 例 (d)] 简 单 计算 表 明 : 此 二 链 可 以 由 时 间 反 


1. 为 了 给 出 g, 一 个 可 行 的 解释 ， 需 要 考虑 无 穷 多 个 同时 进行 的 过 程 ， 如 第 11 节 例 (b) 所 指出 的 那样 . 
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向 而 从 一 个 得 到 另 一 个 ， HAS AT A. 2 节 例 (k) 中 的 链 是 关于 8 在 下 一 次 
出 现 所 需 的 等 竺 时间 ， 而 第 2 节 例 (CUD 中 的 链 则 参考 从 最 后 一 次 出 现 开 始 的 时 间 的 
流逝 . > 
现在 考虑 两 个 具有 不 变 测度 (wu) 的 不 可 约 的 暂 留 的 链 ， 方 程 组 (12. 1) 定义 的 

不 变 测度 可 能 还 有 其 他 的 解 ， 惟一 性 的 问题 与 附加 线性 方程 组 
& = >) pié, (12. 4) 


的 惟一 性 问题 有 紧密 的 联系 ， 此 方程 组 在 第 8 节 中 扮演 了 重要 角色 .此 方程 组 有 不 
足 道 的 解 &=c (对 一 切 i)， 任 何 非 负 解 自然 是 严格 正 的 (确实 如 是 ， 如 果 & 二 0 蕴涵 
了 满足 条 件 p, >0 的 一 切 v 都 有 &, 二 0， 此 事实 又 可 推出 ; 满足 p? >0 的 一 切 v 都 有 
£=0. 一 般 地 ， 只 要 E 能 到 达 E,， 都 有 怠 二 0。 由 于 链 是 不 可 约 的 ， 所 以 对 一 切 v 
都 有 &, 二 0. ) 如 果 {&) 是 一 组 非常 数 解 ， 则 由 (12. 3) 易 证 | 

U; = u£, (12.5) 
ay Hai a FEE 9 的 一 个 不 变 测 度 ， 反 之 ,车 fv.) 是 这 样 一 个 测度 ， 则 12.5) 决 
定 了 (12.4) 的 一 个 正 的 解 . 换 句 话说 ，(12.4) 的 正 的 解 与 具有 矩阵 @ 的 北 链 ': 的 
不 变 测度 之 间 存 在 一 个 一 一 对 应 . 

在 近代 马尔 可 夫 链 理论 和 位 势 理 论 中 ， 正 的 解 {&} 和 fw) 定义 为 边界 . 如何 
描述 它们 的 问题 , 已 超出 了 本 书 所 讨论 的 范围 ， 但是， 下面 的 例子 可 能 给 出 一 些 关 
于 流出 边界 会 产生 什么 问题 的 想法 . | 

例 (a) 考 虑 无 穷 直线 上 的 满足 下 列 条 件 的 随机 徘徊 ， 当 质点 处 于 位 置 7 天 0 时 ， 
它 以 概率 p 向 远离 原点 的 方向 移动 一 步 ， 而 以 概率 9 向 靠近 原点 的 方向 移动 一 步 . 
当 质 点 处 于 原点 时 ， 它 移 至 十 1 或 一 1 的 概率 相等 .假定 p>. 

相应 的 马尔 可 夫 链 的 状态 空间 的 标号 从 一 ce 至 cc， 且 方程 组 (12. 4) 变 为 下 列 
形式 : 


& 一 1 十 17 > 0， 
Bia Bers (12. 6) 


& = sa +38 
& = Éa + PE ot <0. 


1. Hess 组 成 的 列 向 量 ， 则 方程 组 〈12.4) 对 应 矩阵 方程 二 P& 方程 组 (12.1) 为 对 应 u= 
uP, Heh u 为 行 向 量 . 
2 对 于 不 可 约 的 常 返 的 链 而 言 ， 其 不 变 测 测 差 一 个 常数 倍 惟一 ， 由 于 具有 和 矩 阵 了 或 8 的 链 是 同一 种 
类 型 的 ， 所 以 ， 我 们 证 明了 : 
定理 ”对 于 不 可 约 的 常 返 的 链 而 言 ，(12.4) 的 惟一 的 非 负 解 为 总 一 常数 ， 
几乎 之 字 逐 句 地 重复 定理 11. 1 的 后 半 部 分 的 证 明 ， 也 可 证 明 此 定理 . 确实 如 是 ， 用 归纳 法 可 
iE: HEI i rmn, A 
6 = [AP tee + fede + >) pyre. 


对 于 常 返 的 链 来 说 ， 括 号 内 的 表示 式 趋 于 1, MARA 1. A. Gb. ERNE. 
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今 
p=1-5 (4). “4 ;之 0; n= (4) . 当 iO, (12.7) 
易 见 名 一 六 和 总 二 1 一 六 定义 出 方程 组 〈12. 6) 的 两 组 非 平凡 解 : . 由 此 推出 ， 链 是 暂 
留 的 ， 从 而 质点 的 位 置 必 须 赵 于 十 ce 或 一 cc， 
此 结论 也 可 以 从 随机 徘徊 理论 直接 得 到 ， 事 实 上， 从 第 14. 2 节 可 知 ， 当 质点 从 
i>O 出 发 时 ， 迟 早 要 到 达 原 点 的 概率 等 于 (g/p)， 由 对 称 性 可 知 ， 质点 从 原点 出 发 阅 


移 至 十 co 或 一 oo 的 概率 与 上 述 概率 一 样 ， 从 而 最 终 漂移 至 一 oo 的 概率 为 闻 (q/p)'、 中 


此 断言 w 是 质点 从 i 出 发 最 终 漂 移 至 十 co 的 概率 ; 1y 是 质点 从 i 出 发 最 终 漂 移 
至 一 co 的 概率 .在 近代 理论 中 ， 这 些 情 况 ， 将 用 引进 “流出 边界 点 ”十 ce 和 一 ce 来 
描述 . 

(b) 上 一 个 例子 由 于 它 过 于 简单 ， 容 易 使 人 迷惑 而 不 得 要 领 ， 因 此 ， 构 造 一 个 其 
边界 由 无 穷 多 个 点 构成 的 例子 可 能 是 有 用 的 . 为 此 ， 考 虑 一 个 在 x，y 平面 上 的 随机 
徘徊 如 下 其 x 坐标 作 通 常 的 随机 徘徊 ， 一步 移动 十 1 或 一 1 的 概率 分 别 为 户 和 
g 二 p， 除 了 坐标 是 O 以 外 ，y 坐标 保持 固定 ， 而 当 福 坐标 为 0 时 ，y 坐标 下 降 L. 
更 精确 地 说 ， 当 j 关 0 时 ， 只 有 两 种 可 能 的 转移 :Gj,k) 习 (十 1,k) 和 (j,k)>(j 一 1， 
k)， 它 们 的 概率 分 别 为 p 和 9 二 p， 而 从 (0,k) 出 发 ， 以 概率 pp 转移 到 (1,&k 一 1); 以 概 
率 g 转移 到 (一 1,& 一 1). 

由 随机 徘徊 理论 得 知 ，x 坐标 一 定 趋 于 十 ceo， 而 且 (具有 概率 1) 它 仪 仅 有 限 次 
经 过 0， 由 此 推出 (除了 一 个 零 概率 事件 以 外 ) y 坐标 只 改变 有 限 多 次 . 这 和 意味 看 y 
坐标 改变 有 限 多 次 以 后 ， 质 点 将 固定 在 菜 条 直线 y= 二 r+ 上. 在 此 意义 上 ， 有 无 穷 多 条 
“逃逸 到 co 的 路 线 ”， 而 且 对 每 一 个 初始 位 置 (j,k)， 可 以 算出 * 质点 最 终 要 在 直线 
y 二 7 安家 的 概率 2. 易 见 ， 对 于 每 一 个 固定 的 +， 是 方程 组 (12.4) 的 一 组 解 ， 
而 且 通 解 是 这 些 特 解 的 线性 组 合 ， 此 外 ， 特 解 具有 下 述 直 观 的 明显 的 “边界 条 
件 ” 的 特征 : 24 kér, jooht, E270; mM k=r jot, 2-1. > 

在 下 述 意 义 下 ， 这 些 例 子 是 典型 的 ， 给 定 一 个 不 可 约 的 暂 留 的 马尔 可 夫 链 ， 总 


1. 通 解 是 5 一 4 十 Br ， 其 中 A 和 了 是 什 意 常 数 ， 确 实 ， 这 些 常 数 可 以 取得 使 之 能 给 出 点 和 ;所 规定 
WE, E, H 2.6) 还 知 : & AE AE hoe FU EIA. 

2，& 六 的 更 精确 的 表示 式 ， 可 以 由 第 14. 2 节 中 关于 一 维 随机 徘徊 的 结果 得 到 .对 于 初始 位 置 <0， 恰 
巧 o 次 触及 原点 的 概率 为 (29)r”'(p 一 g); 而 当 i>0 时， 对 应 的 概率 为 (q/p) (2q)r pg. 从 未 
触及 原点 的 概率 为 0 或 1 一 (eo/t 由 i 所 0 或 之 0 而 定 ， 由 此 容易 推出 ， 对 去:0 有 

aR = OPET (p—@) Rar 
而 当 i> 0 时 有 


ER = (q/pigk(p—-@ kor 


An = 1— (9/p). 
当然 ， 当 brit, gR 二 0，( 原 著 在 此 处 把 入 2 误 写 成 了 了 生生， 


译 者 注 ) 
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是 可 以 定义 一 个 如 下 的 “边界 ”， 系统 的 状态 概率 为 1 地 趋 于 边界 上 的 某 一 点 ， 给 定 
边界 上 的 某 一 子 集 工 ， 我 们 可 以 间 ， 从 状态 i 出发， 系统 收 仑 到 械 中 的 一 个 点 的 概率 
n 是 多 少 ? 我 们 把 {wm} 视 为 被 荆 吸 收 的 概率， 由 此 ， 这 些 吸 收 概 率 总 是 线性 方程 组 
(12.4) 的 解 ; 反之 ，(12.4) 的 所 有 有 界 解 都 是 吸收 概率 的 线性 组 合 ， 此 外 ， 知 给 定 
(12.4) 的 边界 值 如 下 : AT ERMA, AMARST CER ELRW FeO, Wm 
收 概率 就 是 (12. 4) 的 惟一 解 。 现在 ， 我 们 可 以 构造 一 个 具有 有 元素 
bu = Pa 7 (12. 8) 

eT RAL PL REAR RSRASRTFT ENTRAR” FP, RRA E 
EBEE, 的 条 件 概 率 ， 具 有 和 矩阵 了 的 马尔 可 夫 链 ， 可 以 由 原 链 在 条 件 “ 最 终 要 被 吸 
收 到 rT” 下 而 得 到 ， 因 为 将 来 的 发 展 趋势 在 行进 中 是 不 知道 的 ， 这 种 条 件 初 看 是 没有 
意义 的 ， 它 仍然 是 一 个 强 有 力 的 分 析 工 具 ， 甚 至 对 那些 已 经 进行 了 一 段 长 时 间 的 过 
程 ， 它 还 有 实际 操作 意义 . 

边界 也 可 以 对 逆向 矩阵 8 来 定义 ， 因 此 ， 一 般 地 ， 对 应 于 一 个 给 定 的 链 ， 有 两 
个 不 同 的 边界 .它们 分 别称 为 流出 边界 和 流 人 边界 .粗略 地 说 ， 前 者 参考 遥远 的 将 
来 ， 而 后 者 参考 遥远 的 过 去 . 

逆 时 马尔 可 夫 链 ， 首 先是 由 科 尔 莫 戈 罗 夫 考 虑 的 《( 见 0103D. 在 些 书 的 前 两 版 中 ， 和 曾 强 
调 过 (12.4) 的 解 的 重要 性 ， 流 出 和 流入 边界 是 由 费 勒 提出 的 〈 见 L104J4)， 当 只 有 有 限 个 边 
界 点 时 ， 他 的 构造 是 令 人 满意 的 ， 但 一 般 地 ， 由 马丁 〈R. S. Martin) 引进 的 调和 函数 的 构造 
易于 为 人 们 接受 ， 这 是 由 杜 布 (J. Doob) 指出 的 〈 见 [105])， 相对 关系 式 〈12.8) ew ew 
引进 的 〈 见 「104])， 同 时 ， 布 雷 劳 特 〈M. Brelot) 在 经 典 的 调和 函数 论 中 定义 了 类 似 的 算 子 
Ch [105 ])， 


15. 13 一般 的 马尔 可 夫 过 程 


在 应 用 中 ， 通 常用 随机 变量 的 术语 来 描述 马尔 可 夫 链 更 为 方便 . 这 可 按 下 列 简 
单 手法 施行 ， 把 上 一 节 的 记号 E 用 整数 上 替换 ， 于 是 系统 在 时 刻 的 状态 是 一 个 随 
MERX”, CHER Ea” X” 和 Xe 的 联合 分 布 为 PIXO =j, X? =k) = 
A” poy TEXO yee X ) 的 联合 分 布 由 (1.1) 所 给 出 ， 有 时 也 可 能 赋予 E, DORE, 
而 不 是 上 。 用 这 些 记 号 ， 马 尔 可 夫 链 变 成 为 一 个 特殊 的 随机 过 程 : ， 换 句 话说， 一 个 
(相依 的 ) 随机 变量 序列 : (XW ,XW ,…)， 上 标 n 表示 时 间 ， 在 第 17 章 中 ， 我 们 将 获 
得 ， 人 允许 时 间 参 数 连续 变化 的 一 般 随 机 过 程 的 粗略 印象 ， 马 尔 可 夫 过 程 具有 广泛 的 
应 用 而 且 是 一 类 重要 的 随机 过 程 〈 不 管 是 离散 的 或 连续 的 时 间 参 数 )， 甚 至 在 离散 的 


1.“ 随 机 过 程 ” (stochastic process, random process) 实质 上 涵盖 了 全 部 概率 论 ， 从 扎 硬币 到 调和 分 析 ， 
在 实际 中 ， 术 语 “ 随 机 过 程 ”用 得 最 多 的 是 引进 了 时 间 参 数 以 后 . 
2. 这 种 表述 ， 要 参考 一 个 无 穷 乘 积 空间 ， 但 实际 上 ， 我 们 只 关心 有 限 个 随机 变量 的 联合 分 布 . 
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场合 ， 也 还 有 许多 比 我 们 以 往 研 究 过 的 简单 的 链 更 一 般 的 马尔 可 夫 过 程 . 因此 , 给 
出 马尔 可 夫 性 的 定义 ; 指出 刻画 马尔 可 夫 链 的 特殊 条 件 ; 最 后 给 出 几 个 非 马 尔 可 夫 
过 程 的 例子 ， 所 有 这 些 都 是 有 用 的 和 必要 的 ， 

在 概念 上 ， 马 尔 可 夫 过 程 是 经 典 力学 过 程 的 概率 模型 ， 力 学 过 程 中 将 来 的 发 展 
完全 决定 于 现在 的 状态 ， 而 与 现在 的 状态 是 怎样 由 过 去 而 发 展 来 的 无 天 ， 这 些 过 程 
与 有 后 效 的 过 程 〈 或 遗传 过 程 》 有 本 质 差 异 . 如 可 塑性 理论 中 产生 的 过 程 就 是 有 后 
效 的 ， 系 统 的 整个 过 去 的 历史 都 影响 将 来 . 在 随机 过 程 中 ， 将 来 的 情况 本 是 惟一 次 
定 的 ， 但 至 少 有 概率 关系 使 我 们 作出 预测 .对 于 本 章 所 研究 的 马尔 可 夫 链 而 言 ， 有 
关 将 来 的 概率 关系 显然 仅 依赖 于 现在 的 状态 ， 而 与 现在 的 状态 是 怎样 从 过 去 变 来 的 
无 关 ， 换 名 话说， 如 果 两 个 独立 的 系统 转移 到 相同 的 状态 具有 相同 的 转移 概率 ， 那 
么 与 它们 将 来 的 发 展 相 关 的 所 有 概率 都 是 恒 等 的 .上 述 描述 较为 含糊 ， 下 面 给 出 精 
确定 义 ， 

定义 ” 称 一 列 取 离 散 值 的 随机 变量 是 一 个 马尔 可 夫 过 程 ， 如 果 任 意 整 数 1 <n, 
<n <n (X ") 的 联合 分 布 由 下 述 方式 来 定义 ERX” 
=r XP =r, 下， 事件 久 "” 二 工 的 条 件 概 率 恒 等 于 : AMEX” =r, 下 ， 事 件 
w r oy Spee RB thab x1,…,X, 是 使 假设 具有 正 概率 的 任意 数 . 

此 定义 可 用 较 简 洁 的 语言 表述 如 下 ， 给 定 现在 的 状态 x,， 则 系统 过 去 的 状态 的 
任何 附加 的 数据 ， 都 不 会 改变 系统 在 将 来 处 于 状态 工 的 《条 件 ) 概率 . 

本 章 以 前 研究 过 的 马尔 可 夫 链 显然 都 是 马尔 可 夫 过 程 ， 但 它们 都 具有 附加 的 性 
质 ， 转移 概率 pe =P (XI =k | XPM =j) 不 依赖 于 m， 更 一 般 的 转移 概率 

pre = PX” =k|X™ =j} (m<n) (13. 1) 
仅 依赖 于 (n 一 m)， 这 种 转移 概率 称 为 平稳 的 (或 时 齐 的 )， 对 一 般 的 整数 值 的 蕊 尔 
可 夫 链 ，(13.1) 右边 依赖 于 mr 和 nn， 我 们 用 pa (ms n 表 之 ， 从 而 pi Cr» ntl) 
定义 了 -一步 转移 概率 〈1.1)， 现 在 得 到 了 路 径 Go io to J) 的 概率 的 下 述 表 
示 式 : 


a; Pij, (0,1)p;; (l s2) ps 5 (n — 1,7). (13. 2) 
显然 ，(3. 3) 的 适当 的 推广 是 下 列 等 式 
pi: (mn) = Dp (Ms) Pa (ren) (13. 3) 


此 式 对 一 切 满足 mrn 的 > RA. ESSA SOR EE EM, tl 
以 从 (13.2) 推出 ， 称 它 为 查 普 曼 - 科 尔 莫 七 罗 夫 方 程式 ，|[ 转移 概率 pa Cm, n) 对 
离散 的 非 马 尔 可 夫 过 程 也 可 定义 ， 不 过 对 它们 而 言 ，(13. 3) 中 的 因 于 pu Cs n) 必 
需 代 之 以 一 个 不 仅 依 赖 v 和 上 而 且 也 依赖 ; 的 因子 .J 

这 一 章 研究 的 马尔 可 夫 链 ， 是 一 般 的 时 齐 的 离散 的 马尔 可 夫 过 程 . 我 们 不 详细 
讨论 非 时 齐 的 马尔 可 夫 过 程 . 下 面 的 例子 对 了 解 马 尔 可 夫 性 和 说 明 查 普 曼 - 科 尔 英 莹 
罗 夫 方程 式 不 成 立时 的 情况 是 有 益 的 . : 
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非 马尔 可 夫 过 程 的 例子 
(a) RF) DHF RH [第 5.2 节 例 〈c)]， 今 X2 等 于 1 或 0 由 第 7 次 抽出 的 球 是 
黑 球 或 红 球 而 定 ， 序 列 (XO) 不 是 马尔 可 夫 过 程 ， 例如 
P(X? =1|X® = 1} = @4+c)/(6+rte), 
但 是 
PLEX? 一 11X2 =1,X = 1} = (64+ 20)/(b+r 2c). 
(参见 第 5 章 习 题 19-20.) 另 一 方面 ， 如 果 Y” 是 时 刻 ne PH RRR, M 
(YO) 是 具有 常数 转移 概率 的 通常 的 马尔 可 夫 链 . 

(b) BM Ae, S YoY ，… 是 相互 独立 的 随机 变量 列 ，S, 二 7 十 … 十 Y。， 大 9 一 
Sin ex mn 时 ) 仅 依 赖 于 Yaaro’ Yue 从 而 易 见 : 序列 (Sp) 是 一 个 马尔 可 夫 过 
程 ， 现在 我 们 进一步 定义 一 个 新 的 随机 变量 U, 如 下 : 

U, =S +S tet S, 
=Y, + 2Y 1 十 3Y，， 十 … 十 (2 十 1)Y. 
序列 U,’ 构成 一 个 随机 过 程 ， 原 则 上 ， 其 概率 关系 能 够 由 Y, 的 分 布 来 表示 .过程 
(一般 不 是 马尔 可 夫 型 的 ， 因 为 ， 例 如 ， 没 有 理由 断言 PU, 50| U 50a) 5 
PU, = 一 01U = 一 aU， 一 全 一样， 根据 U， 与 U_: 的 知识 来 预报 比 仅 根据 U, BIAI 
识 来 预报 要 好 一 些 . 

在 时 间 参 数 连 续 的 场合 ， 前 面 的 求 和 可 用 积分 来 代替 在 扩散 理论 中 ， 六 BA 
加 速度 的 作用 ， 而 S 则 为 速度 ，U, 是 位 置 . 如 果 仅 仅 是 位 置 可 以 测量 ， 则 我 们 只 
研究 一 个 非 马尔 可 夫 过 程 ， 虽 然 它 间接 地 用 一 个 马尔 可 夫 过 程 来 定义 . 

(c) 滑 动 平 均 ， 再 次 令 (Y) 为 相互 独立 的 随机 变量 序列 ， +r 阶 滑动 平均 定义 为 
X? =Y, 十 He +Y u)r AM: X 不 是 马尔 可 夫 过 程 ， 此 类 过 程 在 许多 应 
用 问题 中 都 会 遇 到 (参见 习题 25). | 

(d) 交 通 问题 .为 了 得 到 一 个 非 马尔 可 夫 过 程 的 经 验 例子 . FAO CR. Furth ) Xf 
街 上 某 一 段 的 行人 进行 了 广泛 的 观察 . 此 过 程 的 理想 化 的 数学 模型 可 用 下 述 方法 得 
为 简单 起 见 ， 假 定 所 有 的 行人 以 同一 速度 ， 前 进 ， 并 且 只 考虑 沿 同一 方 问 行进 的 行 
A. 我 们 把 x- 轴 分 成 具有 固定 长 度 a 的 一 些 区 间 五 ， 五 ，…， 并 且 规 则 地 每 隔 d/v 
个 时 间 单 位 就 观察 一 次 行人 分 配 的 情况 ， 定 义 Y, 是 初始 时 刻 在 I 中 的 行人 的 个 数 . 
在 第 7 次 观察 时 ， 这 批 行人 将 在 Le, PRAM. MKE L 中 将 包含 YA TITA A 
K, EKE 0<xz< Na 内 的 行人 的 总 数 为 XO HY, 十 … 十 YNw， 所 以 ， 我 们 得 到 的 
过 程 实 质 上 是 一 个 滑动 平均 过 程 . 随机 变量 Y, 的 最 简单 的 模型 是 但 努 利 试验 .在 4 
>0 的 极限 情况 下 ， 这 导出 一 个 连续 模型 ， 在 此 模型 中 ， 泊 松 分 布 取代 二 项 分 布 . 

Ke 马尔 可 夫 过 程 的 闪 加 〈 合 成 洗 牌 )， 有 很 多 专门 设备 《如 电话 局 里 的 选择 从 
群 ， 计 数 器 ， 过 滤器 ) 中 ， 其 行为 可 用 两 个 马尔 可 夫 过 程 的 迭 加 而 其 输出 又 不 是 与 
尔 可 夫 过 程 来 描述 ， 从 下 面 的 洗 牌 的 方法 的 研究 ， 可 以 得 到 这 类 设备 的 功能 的 一 个 
清晰 的 认识 . 
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对 一 副 有 N 张 的 牌 ， 再 附加 一 副 同 样 的 牌 。 洗 牌 时 ,通常 只 对 附加 的 这 副 进 行 . 
如 果 它 的 各 张 牌 的 次 序 是 (al ,as ，…,an)， 则 把 原来 那 副 牌 按 下 列 次 序 排列 ， 把 第 1， 
第 2，…， 第 NN 张 牌 分 别 调 到 第 a1， 第 a ,第 an 个 位 置 ， 于 是 洗 附 加 的 那 副 牌 就 
间接 地 决定 了 原来 那 副 牌 的 次 序 ， 后 者 构成 了 一 个 非 马尔 可 夫 型 的 随机 过 程 . 为 了 
证 明 这 一 点 ， 只 需 证 明 : 原来 那 副 牌 的 两 次 接连 的 次 序 的 知识 能 提供 的 线索 ， 比 最 
后 一 次 提供 的 线索 一 般 要 多 . 我 们 对 一 个 简单 的 特例 来 证 明 这 一 论断 . 

设 N= 二 4， 并 设 附加 的 那 副 牌 的 初始 次 序 是 “2431)， 此外， 采取“ 错 牌 ”的 方 
式 来 洗 牌 ， 即 次 序 (al ,as ,ai al) FER (a 53 6 Ay 4 Q,) s Caz sadasa sa ) s Casa sasa) 


中 的 某 一 个 ， 而 且 假 定 出 现 这 三 种 中 任 一 种 的 概率 都 是 亏 ， 在 这 些 约定 下 ， 在 任何 


时 刻 ， 附 加 的 那 副 牌 的 次 序 总 是 (2431) , (4312), (3124), (1243) 这 四 种 次 序 之 一 ， 男 
一 方面 ， 简 单 的 实验 表明 : 原来 那 副 牌 将 逐步 经 历 全 部 24 种 可 能 的 次 序 ， 而 且 其 中 
每 一 种 可 能 都 结合 附加 的 那 副 牌 的 四 种 可 能 次 序 之 一 而 出 现 . 这 意味 痢 : 原来 那 副 
牌 将 无 穷 多 次 地 出 现 次 序 (1234)， 而 在 它 之 后 ， 总 是 出 现 (2431), (4312),(3124)， 
(1243) 这 四 种 次 序 之 一 ， 因 为 ， 附 加 的 那 副 牌 绝 不 能 在 错 牌 中 保持 原 次 序 不 变 ， 故 
原来 那 副 牌 不 可 能 接连 两 次 磁 到 同一 种 排列 .如 果 在 时 刻 (mn 一 1) 和 nn， 原来 那 副 牌 
的 次 序 分 别 为 (1234) 和 (1243)， 则 在 时 刻 ntl, KAS (1234) 是 绝对 不 可 能 的 . 
由 此 可 见 ， 接 连 两 次 观察 比 一 次 观察 所 传递 的 信息 要 多 ， 

(f) 一 个 满足 查 普 量 - 科 尔 英 虽 罗 夫 方程 式 的 非 马尔 叮 夫 过 程 ， 在 E 到 Ei 的 转移 不 依赖 
到 达 五 .的 方式 的 假设 下 ， 我 们 曾经 推出 过 等 式 (3.3)， 因 此 ， 开 始 直 觉 以 为 似乎 没有 非 马 尔 
可 夫 过 程 满足 此 等 式 . 下 面 的 事实 似乎 支持 这 一 猜想 : RANEY n PROB OAR 
大 群 精细 的 等 式 ， 仍 然 可 能 有 例外 存在 “〈 至 少 在 理论 上 )， 事实 上 ， 在 第 9.1 节 中 ， 我 们 曾经 


过 到 过 两 两 独立 的 而 且 同 分 布 的 以 概率 二 分 别 取 值 1，2，3 的 随机 变量 序列 ， 因 此 ， 我 们 得 
到 了 一 个 可 能 状态 是 1，2，3 的 具有 pi => OU MA 的 组 合 ) 的 过 程 ， 因 此 等 式 


(3.3) 显然 成 立 (因为 ph 二 记 )， 但 此 过 程 仍然 是 非 马 尔 可 夫 过 程 ， 为 了 证 明 这 一 点 ， 假 定 


第 1 步 把 系统 转移 到 状态 2， 下 一 步 转移 到 3 是 可 能 的 充分 必要 条 件 为 : 初始 状态 为 1 因此， 
第 1 步 转移 以 后 的 转移 不 仅 依赖 现在 的 状态 而 且 也 依赖 于 初始 状态 〈 对 于 各 种 修正 ， 参 见 第 
9.1 节 的 脚注 )， 
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L 在 一 个 伯 努 利 试验 序列 中 ， 如 果 第 "一 1 和 第 n 次 试验 的 结果 是 SS， 则 说 在 时 刻 n 观察 到 
RSE. Xb, Ex, Es E, 分 别 代表 SF. FS,FF. RAAR PAP 的 一 切 方 寡 ， 把 此 方 
案 一 般 化 . 

2. 将 下 列 四 个 链 的 状态 加 以 分 类 ， 它 们 的 矩阵 书 的 各 行 分 别 给 出 如 下 ， 对 每 一 种 情况 ， 孝 


10. 


11. 


12. 
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R PR pi? WEER. 
w (o5.+).(4.0,4),(4,5.0); 


iol 


(b) (0,0,0,1),(0,0,0,1), (= ,-5 +0,0), (0,0,1,0); 


2° 2 
(c) (= .0,5.0,0), (4 +40,0), (=.0.4,0,0), (0,005.4), 


3 


iol tid id dt 
Cd) (Os 5-H 104060) + (00,004 sy sy ) 10,0105 sy oF) +14040,0,0,0) 5 (15050,0505 


0),¢(1,0,0,0,0,0). 
RUSSO, WER j 是 前 ”次 掷 出 的 最 大 点 数 ， 则 说 系统 在 时 刻 n 处 于 状态 Ej， 
试 求 和 矩阵 P" 并 验证 (3.3) 成 立 ， 
在 第 2 节 例 (ij) 中 ， 试 求 出 : 系统 从 E WR. PRE 和 Es BRN ORBO BR x 和 
yr(k 二 2,3,4,6). (直接 从 基本 定义 来 解 此 问题 而 无 需 参 考 第 8 章 . ) 
利用 马尔 可 夫 链 来 处 理 第 1. 5 节 例 b)， 计 算 每 个 财 徒 获胜 的 概率 . 
A> Ey 是 吸收 状态 CBN po =1). 对 j>0, 令 pj 二 ppij-1 一 gp 十 9 一 1， 求 出 怡 在 第 nn 步 
被 吸收 的 概率 Ao ， 并 求 出 此 分 布 的 期 望 . 
WEE PHELAN wou. 对 7>0， 如 上 一 个 问题 一 样 ， 令 py =p Al pjj-i=¢. K 
出 E 的 循环 时 间 的 分 布 . 
对 7 一 0 l,e > Pj.j+2 TU 各 Pj, 一 1 一切， 讨论 状态 的 性 质 . 
两 个 反射 壁 ， 设 一 个 链 具 有 状态 1,2,……p, 且 其 转移 概率 和 矩阵 王 的 第 1 行 和 最 后 一 行 分 别 
为 (g,p,0,*…,0) AN (0,*…,0,qg, 记 ). 在 其 余 的 行 中 有 peti = Po Prii = 9: 求 平稳 分 布 . 
此 链 能 是 周期 的 吗 ? | 
推广 伯 努 利 - 拉 普 拉 斯 扩散 模型 [第 2 节 例 DI). REA bzo SRAM w=20-b6 7H 
质点 ， 每 个 容器 内 的 质点 的 个 数 为 常数 p- 
一 个 具有 状态 E E ,… 的 链 ， 其 转移 概率 为 


一 | Unj—U eT? 
pa =e" Dy (+ ) pq Ch—v) 
当 v>k 时 ， 和 号 中 相应 的 项 理解 为 0。 试 证 
k 
pip ~ re MA 


注 。 此 链 在 统计 力学 Gosl 中 出 现 并 可 解释 如 下 : 系统 的 状态 由 空间 中 某 个 区 域 中 的 质点 数 
来 确定 ， 在 每 个 单位 长 的 时 间 间 隔 中 ， 每 个 质点 离开 该 区 域 的 概率 为 4g， 而 且 各 质点 是 随 
机 独立 的 ， 此 外 ， 新 质点 可 以 进入 该 区 域 ， 而 且 有 7 个 新 质点 进入 该 区 域 的 概率 由 汝 松 
表达 式 ct .和 /rt 给 出 ， 于 是 ， 其 平稳 分 布 是 具有 参数 为 和 /9 的 泊 松 分 布 ， 

埃 伦 费 斯 特 模型 ， 在 第 2 节 例 〈e) 中 ， 设 初始 时 第 一 个 容器 内 有 7 TT. 如果 在 第 
步 系统 处 于 状态 ， 则 令 X? =2k-a GU Xm 是 两 个 容器 中 的 分 子 个 数 之 差 );， 令 en 一 
E (XP). iE en, = (a 一 2) e/a, Rii e= (1 一 2/a)”(27 一 a).， CER: 当 noo 
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时 ，e, 一 0. ) 
13. 把 第 13. 1 节 例 (g) 中 的 计数 兹 问题 作为 马尔 可 夫 链 来 处 理 . 


14. 


15. 


16. 


17. 


18. 
19. 


20. 


21. 
22. 


23. 


24. 


具有 反射 壁 的 平面 随机 徘徊 .考虑 平面 上 的 有 界 区 域 中 的 对 称 的 随机 徘徊 . 边界 按 下 述 
意义 设置 反射 壁 : 每 当 质 点 在 无 限制 的 随机 徘徊 中 离开 该 区 域 时 ， 它 被 强制 地 回 到 最 后 
的 位 置 . 试 证 ， 如果 区 域 中 的 每 一 个 点 都 能 由 区 域 中 的 每 一 个 其 他 的 点 所 到 达 ， 则 存在 
平稳 分 布 w= 二 1/a， 此 处 a 是 该 区 域 中 的 位 置 的 个 数 .〈 如 果 区 域 是 无 界 的 ， 而 状态 都 是 
常 返 的 零 状态 ， 则 u =1 是 一 个 不 变 测度 . ) 

EPH. Hin. mo) 为 一 有 界 数列 ， 王 是 一 个 过 有 历 链 的 转移 概率 和 矩阵， 斌 证 : 


D PPa; > > wz} , 
并 证 明 第 13.10 BH] (c) 的 重复 平均 程序 是 一 个 特例 . 
在 等 待 队 列 理论 中 ， 遇 到 链 和 矩阵 : 

po pi pe p e 

Po Pı Pz P 

O po pr P 

0 0 p pr 
此 处 【加 是 一 个 概率 分 布 . 利用 母 丽 数 来 讨论 状态 的 性 质 ， 如 果 平 稳 分 布 人 存在 的 话 ， 
inte A PKI ŽI. 
吸收 的 等 待 时 间 . 对 于 暂 贸 状态 E., SY; 为 系统 第 1 次 进入 常 返 状态 的 时 刻 ， 假定 永 远 
停留 在 暂 留 状态 的 概率 为 0. WH dg SEY ETIR EH: 

dj = > ppd. +1 


的 惟一 解 ， 其 中 和 是 对 所 有 的 使 E, 为 暂 留 状态 的 那些 vw 来 求 的 ， 然 而 d; 不 必 有 限 . 
MERAH TA a<, MHA E; 能 到 达 E， 则 用 小 于 等 于 a 一 1 步 能 到 达 E Ge). 
HAS a 个 状态 且 E; 是 常 返 的 . WE: 存在 一 个 数 gl, 使 得 ， 当 n>a 时 ，E; WG 
环 时 间 超 过 的 概率 小 于 g". Gea: 应 用 习题 18. ) 

在 有 限 链 中 ，E, 为 暂 留 状态 的 充分 必要 条 件 是 ， 存在 天， 使 互 AEA E, m E 不 能 到 
KE, (对 无 穷 链 来 说 ， 此 事实 不 成 立 ， 在 随机 徘徊 已 经 证 明 .) 

有 一 个 对 角 线 上 的 元 素 p> 0 的 不 可 约 链 不 可 能 是 周期 的 . 

有 限 的 不 可 约 链 是 非 周 期 链 的 充分 必要 条 件 是 ， 存在 mn 使 pe >O 对 一 切 7 和 上 部 成 六， 
在 具有 a 个 状态 的 链 中 ， 设 Crier.) 是 线性 方程 组 x = 》 par, 的 一 组 解 . 证 明 : 
(a) 如 果 对 一 切 j PA 2 <1. ME =l 的 一 切 状 态 构 成 一 个 团 集 ; (b) 如 条 E ME: 
属于 同一 个 不 可 约 集 ， 则 zx; 二 zs; (O 对 有 限 的 不 可 约 链 而 言 ，{x;) 化 为 一 个 常数 . 
提示 : 考虑 方程 组 在 一 个 闭 集 上 的 限制 . 

( 续 上 题 )， 如 果 Cae) Baj=s X ppr (ls|=1,Es#D 的 一 组 (RED f. W 
存在 整数 >l, E $ 二 1， 如 果 链 是 不 可 约 的 ， 则 满足 上 述 条 件 的 最 小 整数 是 此 链 的 
周期 . 


1. 原著 此 处 等 成 四 行 无 穷 列 矩 阵 ， 应 为 无 穷 行 无 穷 列 矩 阵 ， 一 一 译 者 注 


25. 


26. 


27. 


28. 


29. 
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提示 : 不 失 普遍 性 可 设 xz1 一 1 之 | x, | ， 逐 次 考虑 1 步 、2 步 ，…… 到 达 的 状态 集合 . 
滑动 平均 。 令 {Y} 是 一 列 相互 独立 的 随机 变量 ， 每 个 均 取 值 十 1 或 一 1， 相 应 的 概率 都 


BS. SX 一 《Y, 十 Yr1) /2， 试 求 出 转移 概率 


Da One = PY X” =k| X =F}, 
其 中 m<nyjsk=—1,0,1. WER XO [RA BRAT REA (13.3) 不 成 立 . 
在 一 串 伯 努 利 试验 中 ， 如 果 第 n 一 1 次 和 第 ”次 试验 结果 均 为 成 功 ， 则 说 观察 到 了 状态 
E ， 否 则 说 系统 处 于 为， 试 求 ” 步 转移 概率 ， 并 讨论 它 的 非 马 尔 可 夫 性 
注 ， 此 过 程 可 以 由 习题 1 中 的 链 通过 将 三 个 状态 合并 为 一 个 状态 来 获得 ， 这 种 合并 程序 
可 以 应 用 于 任何 马尔 可 夫 链 ， 而 使 其 马尔 可 夫 性 遭 到 破坏 ， 在 哈里 斯 的 论文 bo 中 研究 过 
这 类 过 程 
巴尔 可 夫 链 的 混合 ， 给 定 两 个 状态 的 个 数 相同 的 马尔 可 夫 链 ， 它 们 的 转移 概率 矩阵 分 别 
为 P 和 及 由 一 个 初始 分 布 和 ，” 步 转移 概率 矩阵 却 忆 十 于 PP3 定 义 出 一 个 新 过 程 ， 试 讨 


论 新 过 程 的 非 马尔 可 夫 性 及 其 与 第 5. 2 节 的 镀 子 模型 之 间 的 关系 ， 

S NN 为 具有 期 望 为 4 的 泊 松 随机 变量 .考虑 N 个 相互 独立 的 从 E 开始 的 具有 相同 的 转 
移 概 率 矩 阵 了 的 马尔 可 夫 过 程 ， 令 Ze 是 第 ” 步 以 后 系统 处 于 状态 E, 的 次 数 . 证 明 ZU 
具有 期 望 为 1。2 的 泊 松 分 布 . 

提示 :应 用 第 12. 1 节 例 〈b) 的 结果 . 

应 用 上 一 个 问题 ,证 明 第 11 节 例 D 中 的 随机 变量 Xi” 具 有 期 望 为 2 wp 多 = u 的 泊 
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在 本 章 中 ， 我 们 讨论 具有 有 限 个 状态 E. E, 及 给 定 的 转移 概率 pi 的 马尔 可 
k. 主要 目的 是 推出 n 步 转移 概率 pi; 的 显 式 表 达 式 .除了 第 3 节 中 的 记号 和 概念 
以 外 ， 并 不 需要 上 一 章 中 其 他 的 结果 . 

我 们 将 利用 母 函 数 方法 ， 再 由 第 11. 4 节 中 的 部 分 分 式 展开 来 得 到 我 们 所 要 求 的 
结果 .我 们 的 结果 也 能 直接 由 和 矩阵 的 典型 的 分 解 理论 来 得 到 (反之 ， 由 我 们 的 结果 
也 能 推出 矩阵 论 中 的 相应 结果 )， 此 外 ， 对 于 有 限 链 ， 和 第 15 SEP AEA a PE I, 
亦 可 由 本 章 的 结果 推出 ， 然 而 ， 为 简单 起 抑 ， 对 普遍 性 稍 加 限制 ， 而 不 考虑 那些 使 
一 般 理论 复杂 化 而 在 实际 中 出 现 不 多 的 场合 . 

在 第 1 节 ， 概 述 一 般 方法 ;例子 则 在 第 2、 第 3 两 节 中 给 出 ; 第 4 节 着 重 讨论 暂 留 状 
态 和 吸收 概率 ; 而 在 第 5 节 中 ， 则 将 所 得 之 理论 用 于 找 出 状态 E 的 循环 时 间 的 方差. 


16.1 一 般 理 论 


对 固定 的 和 有 有， 引进 母 图 数 : 


Pa (s)= 55 Pie s". (1.1) 
把 上 式 两 边 乘 以 sp; 再 对 7 一 1，…p 求 和 得 
>? Pi P je (Cs)= Pa (S)— pe. (1.2) 
SHU, REA Als. =P. (OWE FARE BAL, 
z — s > piz; =b. (1. 3) 


GR, 1.3) 的 解 zx 是 s BAERS, BEMARACHHAS DO), BP DOZ 
ee BR MATS. AT SRE RAHA BR, Asr MW eDG ) RB 
个 o 阶 多 项 式 〈 称 之 为 转移 概率 pat RAER P 的 特征 多 项 式 )， 称 其 根 iet A 
KE MEP 的 特征 根 ( 或 特征 值 ). 

现在 我 们 引进 简化 假设 ; 特征 根 二 ,，…,t 都 是 单 根 《不 同 的 )， HH 不 等 于 0. 
这 对 一 般 性 略 有 限制 ， 但 是 ， 其 理论 仍 可 涵盖 实际 中 的 绝 大 部 分 情形 . 


x 本 章 处 理 特殊 的 主题 ， 可 上 略 去 . 
L 回忆 一 下 ; oP EF OR 1 Kk Rj =k mE. PP HARA Kronecker 符号 . ) 
2. +0 的 假设 将 立即 放弃 ， 第 4 节 例 (b) 中 讨论 了 具有 重 根 的 链 的 数值 问题 ， 
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如 二 所 指出 的 ， 对 图 定 的 R,Px5s) 是 po 个 ss 的 有 理 函 数 ， 且 它们 有 公共 的 分 母 
D(s) ,D(s) 的 根 由 非 零 特征 根 1, 的 倒数 所 给 出 ， 因 此 ， 由 第 11.4 节 的 结果 推出 ， 存 
在 常数 OS? 使 | 


b? bP 
Po ts) 一 1 一 十 TI (1. 4) 
把 诸 分 式 展 成 几何 级 数 可 知 ， 对 一 切 n 宇 0 A: 
Die =O tee FOL ti. (1.5) 


FRU, ARO? 由 某 个 线性 方程 组 的 解 所 惟一 决定 . BMY AE (1.5) 中 把 
PREV. 代 之 以 n 十 1 而 得 到 ， 而 把 (1.5) Fe 以 pi; 再 对 j 二 1,…,o 求 和 也 可 以 
得 pW 了， 把 此 二 表示 式 作 成 等 式 我 们 得 到 下 述 形式 的 恒等式 对 一 切 ”都 成 立 : 

Cet e+e = (1.6) 
除了 一 切 系数 都 是 0， 这 是 不 可 能 的 ， 所 以 


> Pi bR = thb a (1.7) 
Xi, k 和 w 的 组 合 都 成 立 . 把 a. 5) FEA ps 并 对 k 求 和 我 们 得 到 类 似 的 等 式 
> pe = bby. (1. 8) 


考虑 po 行 o 列 的 以 2 如 为 元 素 的 矩阵 be. 关系 式 1.7) BS? bO WB k IÆ PI o 
NER REFS FER 4 t =t, 时 的 一 组 解 : 


> pyx; tax, =. (1.9) 
eb, (1.8) RE. 8 的 第 行 满足 
5 YP ty, 7O, (1,10) 


其 中 大大， 方程 组 1.10) 可 由 (1.9) 行列 互 换 而 得 到 ， 所 以 它们 的 行列 式 是 一 样 的 . 
(1.9) 的 行列 式 只 有 当 上 是 不 同 的 特征 值 4 ,…,t 中 的 一 个 时 才 为 0， 换 句 话 说， 方程 组 
(1.9) 和 (1.10) 有 非 平凡 解 的 充分 必要 条 件 是 对 某 个 v 有 t= 用 Car tts," 和 
Cy? ey?) 表示 此 二 线性 方程 组 的 对 应 的 一 对 解 ， 它 们 差 一 个 常 因 子 ， 所 以 

bY = ol?) PY, (1.11) 
此 处 < 是 一 个 不 依赖 A 的 常数 ， 为 了 求 出 这 个 未 知 常数 ， 请 注意 ， 用 归纳 法 由 
(1.9) 可 推出 对 一 切 n 有 


È s =t (1. 12) 


1， 从 理论 上 看 ， 应 该 略 去 抵消 分 子 一 个 根 的 那些 根 六 ， 对 于 这 样 的 根 ， 我 们 取 bp =0, MA C1. 4) 
和 (1.5) 在 任何 情况 下 都 成 立 ， 

2, FSA p £8 on, WEE- ARET “Aci”. 译 者 注 

3. 方程 组 (1.7) 和 1.8) 可 写成 紧凑 的 矩阵 形式 ，B2m =t b Y A bY P=1b. 
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对 :一 思 应 用 此 关系 式 (是 1 和 po 之 间 的 任 一 整数 )， 当 pi 1.5) SRAM. A: 
tx, =p? DP oD > VD +. HE ra x (p) > yP r CA) (1.13) 


这 是 一 个 形 如 (1. 6) 的 等 式 ， 它 只 有 当 全 部 系数 为 0 时 才能 成 立 把 两 边 的 & 的 系 
数 作成 等 式 最 终 得 到 : 


cS) Pa? =1. (1.14) 


此 天 系 却 决定 了 d.1D 中 的 系数 OP. 由 于 xz” Ay)? 都 是 差 一 个 常数 因子 而 惟一 
决定 ,但 是 以 Az” Ra” ,以 By? Rye. (ic? EM cP /AB, AR OP TURE, 
现在 ， 把 上 述 结果 综述 如 下 .两 个 线性 方程 组 (1.9) A (1.10) 最 多 对 o 个 不 
同 的 上 值 (对 两 个 方程 组 来 说 是 一 样 的 ) 有 非 平 凡 解 . 我 们 假定 恰 有 o 个 这 样 的 值 
上 1 而且 它们 都 不 等 于 0， 对 每 个 万 ， 选 取 〈1.9) HERR CrP ae) 
和 (1.10) 的 一 组 非 零 解 Cy? ee PD. cM 由 14) 来 定 ， 于是， 对 7 一 0,1……, 有 


P 
DP = X, PP y Ptr (1. 15) 
1 一 1 


因此 ， 我 们 得 到 了 所 有 转移 概率 的 精确 表示 式 ”. 

除了 对 可 分 解 的 链 以 外 ， 在 大 多 数 实际 问题 中 ， 特 征 根 均 不 相等 的 假设 是 满足 
的 ， 即 使 对 可 分 解 的 链 ， 也 只 需 作 一 点 小 改动 即 可 〈 见 第 4 节 )， 然 而 ，0 在 特征 根 
中 的 情况 并 不 少见 ， 在 这 种 情况 下 ， 我 们 取 tt, 二 0， 由 线性 方程 组 〈1.3) 的 行列 式 
D(s) 仅 有 po 一 vere sett 1 SATE RRA Pp OMT oi 阶 多 项 式 之 比 ， 可 以 
推出 新 的 结果 . 部 分 分 式 展开 要 求 分 子 的 阶 小 于 分 母 的 阶 ， 为 此 ， 必 须 首先 从 Pi Cs) 
中 减 去 一 个 适当 的 常数 ， 用 这 种 方法 ， 我 们 得 到 了 Pa (s) 的 一 个 不 同 于 (1.4)〉 的 部 
分 分 式 展开 ， 在 此 展开 式 中 ， 要 用 一 个 常数 代替 1.4) 中 的 最 后 一 项 观察 一 下 
(1.15) 立即 发 现 ， 此 程序 只 有 当 n=0 时 才 影 响 右 边 ， 换 句 话 说 ， 对 之 1， 甚 至 当 
t=O AR tt. 1 都 不 是 0) HM, pe 的 精确 表示 式 (1.15) 仍 成 立 . 

只 有 当 | & | 二 1 对 一 切 4 都 成 立时 ，(1.15) 的 左边 才 是 有 界 的 . "| t=1, FE 
组 (1.9) 有 解 羡 二 1， 从 而 有 一 个 特征 根 等 于 1， 不 失 普 记性 可 令 训 三 1， 如 果 链 是 
非 周 期 的 ， 对 所 有 其 他 的 根 都 有 | 所 | 去 1， 从 而 由 (1.15) TA, Shp soon 

pi >e ye. (1. 16) 

换 名 话说， 不 变 概 率 分 布 由 (1.10) (Rt=LD 的 一 组 解 所 刻画 ， 


1. 其 他 系数 为 0 意味 着 ato at, Y yP 一 0 
b=] 


2. 如 用 和 矩阵 形式 ， 最 后 的 公式 1.15) STERE. XO 表 示 具 有 元 素 GY ONE Roxi 
矩阵 )，Y% 表示 具有 元 素 yf 的 行 向 量 ( 即 1xp 阶 矩阵)， 则 (1. 15) 化 为 
P= 5 CV KVYO p 


A 二 1 


其 中 cA? 由 标量 方程 式 CAYO KO) 一] 来 决定 ， 
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16.2 fil 子 


(a) 首 先 考虑 一 个 只 有 两 个 状态 的 链 . 转移 概率 矩阵 具有 下 列 简 单 形式 : 
p=( P a) 
其 中 ，0 二 pp 过 1， 且 0 过 a 三 1，。 因 方程 组 只 包含 两 个 方程 式 ， 所 以 计算 量 很 小 ， 是 不 
足 道 的 ， 特 征 根 是 : 4 = 二 1,t, 二 (1 一 ga 一) ,pp 的 精确 表达 式 1.15) 可 用 和 矩阵 写成 下 
述 形 式 : | 
p” = (° P\ HaTe P P) 


atp p atp a a 
Cie Ab DUA SCR AS SEA AE Ad BE BES RD. AY — n0 都 
成 立 . 
(b) 今 
Q 0 QO 1 
Q 0 0 | 
P= 1 1 ) 0 (2. 1) 
0 0 1 0 
[这 是 第 15.14 节 习 题 2 中 的 (b) WER] 方程 组 (1. 9) 化 为 
Ti 一 Er， Le = tos patam, y= 124. (2.2) 


为 0. sent anise 其 他 的 特征 根 满足 三 or 程式 二 二 1. 如 果 我 们 简 记 


Sr (2. 3) 


(此 处 好 三 一 1) ， 则 三 个 特征 根 分 别 为 二 王 1, 二 9 和 ts 二 人 F (这 与 1 二 人 7 是 一 样 
的 )， 现 在 ， 我 们 要 对 这 些 1 值 来 解 方程 组 (1.9) 和 (1.10)， 因 为 可 乘 任意 和 营 数 ， 
故我 们 可 令 ce? =yP 二 1， 所 以 ,它们 的 解 分 别 是 下 面 三 个 精确 表示 出 来 了 的 佐 阵 的 
第 一 列 和 第 一 行 : 


2 2 . 
Q= es = ços gnti sin 


] 1 2 2 1 1 26 26 1 1 2# 20 
l1 1 2 2| glIl 1 26 28| gil 1 2# 20 

Pp’ == +2 十 二 . (2.4) 
6/1 1 2 2| 609 2 26 610 0 2 28 
] 1 2 2 9 8 2F 2 E 20 2 


因为 我 们 删 去 了 特征 根 上 本 0， 所 以 此 公式 仅 对 nl RA. 
由 (2.4) 易 见 此 链 具 有 周期 3。 为 了 看 清 P" Wl 注意 1 十 9 十 PF 二 0， 用 


此 关系 易 见 ， 当 nn 沿 着 n= 二 3k aTh, P HTT e „$0, 0). Xf n=3k +1 和 


328 “第 16 章 有 限 马 尔 可 夫 链 的 代数 处 理 


7 一 3R 十 2， 对 应 的 极限 为 (0,0,0,1) 和 “(0,0,1,0)， 由 此 推出 不 变 概 率 分 布 为 (去 


ii L, 
6 3 ”3 a 
0 p 0 9 
0 0 
p=|" aan (2.5) 
O q 0 P 
p V0 gqg 0 


此 链 是 下 一 个 例子 的 特殊 情况 ， 由 于 其 简单 性 ， 故 单独 处 理 . 易 见 方程 组 (1.9) 化 
为 合 两 个 未 知 数 Zzi 十 X3 和 ;十 xz 的 两 个 线性 方程 式 ， 因 此 ， 四 个 特征 根 为 ; 

t=l, b=—-1l, t=i¢g- p)» t =— ilq p). (2.6) 
对 应 的 解 为 G, 1,1,1), (—1,1,—1,1), (—i,—1,i,1) 和 G,—1,—i,l1). [FH 
将 要 指出 ， 它 们 都 形 如 (69 ,9 ,8 )， 其 中 g 是 1 的 一 个 四 次 根 . | WHA A. 10) 
5 (1.9) 不 同 之 处 仅 在 于 pp 和 9g 互 换 了 位 置 ， 因 此， 无 须 进 一 步 的 计算 即 得 


pp == (1+Gq- pyr") (1+ C-tr"?}, (2.7) 


(DES 15.2 节 例 Cd) 中 的 一 般 的 循环 随机 徘徊 中 ， 和 矩阵 P 的 第 1 行为 
qo，…,q,1， 而 其 他 诸 行 由 循环 排列 可 得 ， 对 p 二 4 的 特殊 情形 ， 在 上 一 个 例子 中 已 经 
证 明 : xc? Moye MARA 1 的 四 次 根 的 方 寡 因此， 自然 地 想 和 尝试 把 类 似 的 程序 用 
之 于 1 的 p 次 根 ， 即 


0 一 ep (2.8) 
1 的 全 部 o KIRN: 1,056 see 0m. 对 r=l,°°,¢ 
= S q0”. (2.9) 
容易 验证 ， 对 上 一 上 ， 方 程 组 1.9) 和 1.10) 分 别 具 有 解 
x =F, yP =g * (2.10) 
而 且 在 任何 情况 下 ， 对 应 的 系数 c" = 二 1/o， 因 此 ， 最 后 得 
PP =p° S PE. (2.11) 


1. #n=0, (2.11) 只 有 当 一 切 i; 都 非 零 才 有 定义 ， 实 际 上 ， 我 们 已 经 证 明了 ， 当 所 有 的 根 t 都 不 相 
同 的 情况 下 ，(2. 11) 对 wn 宇 1 成立， 但 是 在 现在 的 情况 下 ，、 它 不 一 定 成 立 ， 例 如 ， 邦 q 二 op ”对 一 
RREZ, Weo=l, 但 二 二 … 一 -1 二 0， 甚至 在 这 种 极端 的 情形 下 ，(2. 11) 仍然 成 立 ， 因 为 右边 
对 一 切 ;, kan Sl 仍 有 确切 的 数 ， 幸 好， 不 难 对 n 作 归 纳 法 来 验证 (2. 11)， 特 别 地 ， 当 2? 一 1 


l 
it, (2.9) 中 的 因子 q 化 为 SV 90-1w， 除 了 j 一 k 十 v=0 a p 以外， 此 和 为 0， 而 在 这 两 种 特殊 
r= 


情况 下 ， 此 和 中 每 一 项 都 等 于 1. AE, 4 I pS Age. MARR BT PPE gp te; , 这 
BREA HA T EREC). 
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(e) 占 位 问题 . 第 15.2 WH Cg) 和 未 明证 典 的 占 位 问题 可 以 用 马尔 可 夫 链 的 方法 
KARHE. MRA j 个 盒 被 占 而 另外 po 一 7 个 盒 空 着 ， 则 称 系 统 处 于 状态 7， 如 果 这 就 是 
初始 情形 ， 并 随机 地 再 把 个 球 投入 全 中 ， 则 zi 让 是 有 有 个 盒 被 占 而 万 外 o 一 & 个 盒 空 
着 的 概率 (所 以 当 & 有 < 过) 时 pj;? = 二 0)， 对 7 二 0， 此 概率 可 由 第 2 间 (11.7) 推出 W 
在 我 们 要 推出 peo CER 2 章 的 结果 的 推广 . 

因为 py ilo bia mep PATEA (1.9)〉 化 为 

(ot—j)zj= (0—I rn. (2.12) 
对 t= 二 1， 此 方程 组 推出 : 对 一 切 j 均 有 x); 二 1， 当 1 关 1 时 , DAs, =0. 因此， 存在 
某 个 指标 rr 使 x,,; 二 0 而 x, 关 0， 所 以 由 (2.12) 推出 pt 二 r+， 从 而 特征 根 为 

t,=r/p， r=1,°"*,0. (2.13) 


wp =(")/ (E) (2.14) 


AAW prt, 20° 二 0， 对 二 二 ,方程 组 1.10) 化 为 


(2.12) 的 对 应 的 解 为 


(r—p) yy? =T j tly, (2. 15) 
CAR: 
(ry — oe 7 — jor 
y (E) Dim, (2. 16) 


当然 ， 当 j 二 r yi =0. RAY jor 2? =0, 而 当 j 过 r 时 yy;” ”二 0， 所 以 


ch? =r y” — (£) ， 


内 此 ， 
PP = 2 (=) (站 (人 DA (2. 17) 
把 上 述 诸 因 子 用 二 项 系数 表示 ， 上 式 可 人 简化 为 
o’ kj +i)” o, 
w= (01) S E one) (2. 18) 
而 当 k<j 时 ，z =0. > 


[关于 数值 解释 ， 可 见 第 4 节 例 Cb). J 
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现在 ， 我 们 通过 全 面 讨论 具有 状态 1,2,… o 和 两 个 反射 壁 的 随机 徘徊 ， 来 说 明 
马尔 可 夫 链 的 应 用 ! ， EME PERS 15.2 节 例 (c) 中 出 现 过 对 2<k<p—l, A 
Prati T Ps Pre 17s 而 第 1 行 和 最 后 一 行 分 别 为 (9， 力 ,0，… ,0) 和 (0，…,0,9， 力 ). 


1. 下 述 部 分 讨论 是 第 14 章 的 理论 的 复述 .我 们 的 二 次 方程 式 在 那儿 以 4.7) RER. BAA 
LOH (4.83) 给 出 , He (3.3) 在 第 14 章 中 以 〈4.9) 的 形式 出 现 . 这 两 种 方法 是 有 关联 的 ， 
但 在 许多 场合 ， 其 详细 的 计算 却 是 完全 不 同 的 . 
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为 了 与 第 14 章 的 进程 对 比 的 方便 ， 我 们 抛弃 变量 :二 s!， 而 把 特征 根 写 成 5 
(这 比 志 好 )， 把 它们 从 0 到 po 一 1 标号 将 为 今后 的 讨论 带 来 方便 . 用 变量 *， 线 性 方程 
4H (1.9) MT: 

xı =s(gxi + pr), 
L; = SGX; FPL), (j=2,3,"… ,0o—1), (3.1) 
T,= S2 + px,). 


对 应 于 s=1, WARASRA x; 一 1. 为 了 求 出 全 部 其 他 的 解 ， 用 特 解 方法 (此 法 在 


第 14. 4 节 中 对 类 似 的 方程 组 已 经 用 过 )， 当 4 是 二 次 方程 式 4 一 qs 十 ps 的 根 时 ， 
Xj 二 入 满足 3.1) 的 中 间 那 些 方程 式 ， 上 述 二 次 方程 式 的 两 个 根 为 : 


o 2 — __ 2 
(= 4 dpgs (gy Lv 4pas ， (3, 2) 
ps 2 ps 
因此 ，(3. 1) 中 间 那 些 方程 式 的 通 解 为 : 
1i 一 A(S)A1CS) 十 BCs) 和 (5)， (3. 3) 


此 处 A(s) 和 Bs) 是 任意 的 .(3.3) 满足 G.D 的 第 1 个 和 最 后 一 个 方程 式 的 充分 必 
BE yp =x, 和 x, 二 zx。41， 这 要 求 A(s) 和 B(s) 满 足下 列 详 条 件 : 
As) {1—A, Cs) } + BCs) (1 -A2 Cs) 一 0， 
ACDA C8) TA Cs) } FBS) CS) leo A GS) = 0. (3. 4) 
反之 ， 如 果 此 二 方程 式 对 某 个 oor, M G.D 是 线性 方程 组 〈3.1) 的 一 组 解 ， 而 
BRERA AA OSOR ATE 0. 因此， 我 们 的 问题 是 找 出 s 的 值 使 
AG Cs) =A8 Cs) {BA CSF Az C5). (3.5) 


因为 和 (5)h(s) 二 gq/p， 所 以 第 一 个 关系 蕴涵 了 和 4.(s) Vp/9 必 须 是 1 的 一 个 2p 次 根 ， 
好 是 说 
àl) =E Vg/p er (3. 6) 

此 处 -> 是 一 个 满足 0 过 ”<2o 的 整数 ， 由 定义 63.2) 容易 推出 只 有 当 s=s, 时 (3.6) 
才能 成 立 ， 此 处 

s, 1 一 2 ~ pq 。cos nr/ 0. (3.7) 
值 ;二 s, 违背 了 (3. 5) 中 的 第 二 个 条 件 . 此 外 ,一 Se 从 而 个 不 同 的 特征 全 由 《3.7) 
对 7 二 0,1…,o 一 1 所 给 出 ， 

对 s=s, 解 (3. 4) 并 将 结果 代入 (3. 3) 得 : 


gf2 C771) /2 
r? = A TH sin ZU) | (3. 8) 
p P p P 
hak r=l,°,o—1, 而 当 一 时 ， 有 
Xx; =l. (3. 9) 


男 一 组 方程 式 (1. 10) 现在 化 为 : 
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yi = sql yi Ty), 

Ve = spyr 1 Faye) s (R=Z,°**50—1) (3. 10) 

Y = SPC Y Tp). 
中 间 那 些 方程 式 与 〈3.1) 相应 的 方程 式 的 差别 仅 在 于 把 p 与 4 的 位 置 互 换 了 一 下 ， 
故 其 一 般 解 可 在 〈3. 3) Pip Sq 的 位 置 互 换 一 下 就 可 得 到 Sos 时 ， 第 工 个 和 
最 后 一 个 方程 式 是 成 立 的 ， 经 简单 的 计算 可 以 证 明 : 对 r 一 1,2,…，o 一 1， (3.10) 的 


解 为 : 
p k`? arb p (k—-1) 2 o 
y= 2 sin -一 一 2 sin ZTP (3. 11) 
q 0 q P 
对 s 三 1， 类 似 地 有 
yo = (p/@*. (3.12) 
剩 下 的 问题 是 找 出 由 下 述 关 系 定 义 的 系数 c”: 
gl 
COST Pyp =1, (3. 13) 
k=0 
当 yr 二 0 RF, APRE RRT p/o PAS p 关 9 时， 
‘OY a (p/o — l1 
C p (p/e — 1’ (3. 14) 
而 当 p=qitt, =o r>, ATKI SA. 可 以 推出 ; 
o =P V pg cos) ， (3. 15) 
因此 ， 高 阶 转移 概率 的 一 般 表示 式 〈1. 15) 最 终 化 为 : 
\) p k— | pl On) r 
pp = P/V — 2 p2p Sh ayt [2 Vpa cos m/e 9.16) 
(p/q) 一 ] P =l 1—2 V pq cos xr/p 


此 处 xz” 和 yt? 分 别 由 〈3.8) 和 3.11) 所 定义 ， 当 peat, ARADENN L. o 
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第 1 节 中 的 定理 ， 是 在 假定 根 tj ,t;，… 都 不 相同 的 条 件 下 推出 的 . 对 于 有 生根 的 


1. 在 计算 中 应 用 sin v=[e” 一 e-*“]/(2i)， 可 把 一 些 复杂 的 符号 简化 ，(3. 13〉 中 的 和 化 为 下 述 形式 的 
和 的 线性 组 合 (RARR): 
5 et) TEM’ p 


j=0 
此 处 m=O 或 者 m= 二 土 I， 在 第 一 种 情况 下 ， 此 利 等 于 of MER PAO F, 此 和 为 0。， 由 此 立即 
可 推出 (3. 15). 

2 对 于 具有 一 个 反射 壁 和 一 个 吸收 壁 的 类 似 的 公式 参见 [110]， 在 那里 ， 对 反射 壁 的 定义 作 了 修改 ， 
使 得 质点 可 以 到 达 0， 每 当 这 种 情况 出 现时 ， 质 点 在 下 一 步 就 回 到 1， 于 是 明显 的 公式 比较 复 末 . 
卡 斯 的 论文 也 求 出 了 埃 伦 费 斯 特 模 型 [第 15. 2 节 例 〈e)] 关于 pip Wass. 
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情况 ， 不 需要 作 本 质 修改 ， 但 是 ， 我 们 下 面 仅 讨论 一 类 特别 重要 的 情形 .一 旦 链 包 
含 两 个 或 两 个 以 上 的 团子 链 时 ,4 二 1 就 是 重 根 ， 这 在 与 吸收 概率 有 关联 的 问题 中 是 
BULA. 容易 使 第 1 节 中 应 用 的 方法 适应 于 目前 的 情形 ， 为 了 简明 起 见 ， 我 们 
将 通过 例子 来 说 明 这 种 程序 ， 这 些 例子 将 揭示 一 般 情形 的 主要 特征 . 

Bl 《〈a) 考 虑 转移 概率 矩阵 


1 2 
> = 0 0 0 0 
2 1 
~~ 0 0 0 0 
0 0 机 = 0 0 
p= i (4.1) 
0 0 T 5 0 0 
1 1 1 1 
4 % 4 ? | 4 
1 1 i 1 81 1 
6 6 6 6 6 6 


显然 ，E! ME, 构成 一 个 财 集 〈 即 不 可 能 由 它们 中 的 一 个 状态 转移 到 其 他 四 个 状态 中 
的 任何 一 个 ， 试 与 第 15.4 WEER). FEA, E AE, 构成 另外 一 个 财 集 . Ba, 
E; ME, 都 是 暂 留 状态 .经 过 有 限 多 步 以 后 ， 系 统 进 入 这 两 个 闭 集 中 的 一 个 并 永远 留 
在 其 中 . 

矩阵 焉 具有 下 述 分 块 矩 阵 的 形式 : 


4 0 0 
P='0 B 0 (4. 2) 
U VT 


此 处 每 个 字母 代表 一 个 2 阶 方 阵 ， 每 个 0 代表 由 四 个 0 构成 的 方 阵 ， 例 如 ，4 有 两 
T: E DORE, D, REETH E 和 E 这 两 个 状态 构成 的 链 的 转移 概率 抵 


阵 ， 这 个 矩阵 可 单独 地 加 以 研究 ， 而 方 军 A 则 可 由 第 2 节 例 Ca) 中 令 pail 
得 到 . EHANA PP’ ,… 时 ， 前 两 行 决 不 受 其 余 四 行 的 影响 ， 更 精确 地 说 ， P B. 


有 下 述 形式 : 
A" 0 0 
r= B" 0 
U, V, T 


此 处 A,B T 分 别 是 4, 召 和 工 的 ?次 方 ， 而 且 可 以 用 第 工 节 中 的 方法 算出 ALS 


, (4.3) 


1. 工 中 每 一 行 的 和 不 一 定 是 1， 即 是 说 了 不 是 随机 第 阵 ， 它 是 第 15. 8 节 意 义 下 的 标准 随机 垂 阵 ， 除 非 
:一 1 不 再 是 根 (FET OO). 第 1 节 中 的 方法 可 以 不 加 改变 地 用 到 工 上 . 
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27] 〈a)， 在 那里 ， 所 有 的 计算 都 已 完成 . 」】 代 符 6 个 6 元 方程 式 的 是 一 些 仅 含 2 
个 方程 式 的 2 元 方程 组 . 

应 当 指 出 ，(4. 3) PRU, WV, ABU AV a. MB Eth ABER Bl A”. 
B AIT” 的 简单 方法 来 得 到 .然而 ， 在 计算 严 , 疡 ,… 时 ， 第 3 列 和 第 4 行 也 不 影响 其 
余 的 四 列 ， 换 名 话说 ， 如 果 把 P 中 对 应 于 E 和 E 的 行 和 列 统统 去 掉 ， 我 们 得 到 
Fe 


A" 0 
(v m) (4. 4) 
EE P HAIMA RFPS 
L 2 
> = 0 0 
2 1 
4 ~ 0 0 
A 0\ 13 3 
f 了 |) 一 1 il (4,5) 
4 4 4 
1 1 1 1 
6 6 6 6 


Kn RKE. B. EE (4.4) 能 用 第 1 节 中 的 方法 来 计算 .在 目前 的 情况 下 ， 计 前 
大 为 简化 ， 和 矩阵 VV, 可 用 类 似 的 方法 得 到 . 

通常 ，U, SV, 的 明显 表达 式 只 是 由 于 它们 与 吸收 概率 有 关 才 显得 重要 . SU 
说 ， 系 统 从 EE, 出 发 ， 试 问 它 最 终 进 入 由 已 和 Ei 构成 的 闭 集 ( 并 不 进入 其 他 团 集 ) 
的 概率 入 是 什么 ? 这 个 事件 恰 在 第 nn 步 发 出 的 概率 4, 是 什么 ?显然 ，ps? 十 是 所 
考虑 的 事件 在 第 步 或 此 前 出 现 的 概率 ， 即 

DP + ps? =A, +a, te FA). 

A n>co 即 得 A*， 计 算 A 的 较 好 方法 如 下 : 第 ”一 1 步 必须 使 系统 处 于 异 于 天 M E: 
的 一 个 状态 ， 即 处 于 E RE, (因为 由 E 或 五 不 可 能 转移 到 EF, MEL). RA, #A 
统 在 第 n 步 处 于 EF 或,， 所 以 : 


An = PE? a Fps) tp a T pe) => p +p” | 


注意 ，) 完全 由 位 一 中 的 元 素 所 决定 ， 而 人 一 是 容易 算出 的 ， 在 现在 的 情形 下 ， 
oD — oy +f 3 m a tf oN? 
pss — Ps ~ (3) ;所 以 a= (75) 
(b) 兄 妹 交 配 ， 现 在 把 第 15.2 节 例 O HEA RAH. PRC ER RE, 
当 1 二 1 时 特征 方程 式 的 二 重 根 时 ， 下 述 经 典 的 表示 云 


pr = Dd) te? ye (4. 6) 
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仍然 成 立 . 
线性 方程 组 (1. 9) 取 下 列 形式 
n= ant nH = 1, 
i i i i i i _ 
eee (4.7) 


1 
Gut +44 A = fT» T3 = fT; 9X3 = [Les 


LE ERRA T ease NaR Es 除了 t= 1 以外， 显然 第 1 和 第 5 个 方程 式 的 
解 为 x, = 2,=0. Ale, Sel, EAE ASA 4 个 未 知 数 的 4 个 方程 式 ， 
用 标准 的 消去 变量 法 ， 得 到 一 个 上 的 4 次 方程 式 作为 与 那 4 个 方程 式 相 适应 的 条 件 . 
因为 总 共有 6 ARMER, HA 1 二 1 是 二 生根 ， 容 多 证 明 此 6 个 特征 根 是 ， 


=R= h= =p A,A, (4.8) 


(4.7) 的 对 应 的 解 (1, oe, 26?) 可 选取 如 下 : 


了, = 40, >) (0, S51, F) + (05140, 1,0,0)(0,1,-1,1,0,—-4), 
(0,1, -1+¥75,1,0,6—-2/5),(0,1,—-1—V5,1,0,64+2¥5). (4. 9) 
下 一 个 问题 是 求 出 : 把 (4.7) 89479 PRAT AS Bl RB BAC” 
ys). REF r3, Hie Th RAAT MERE, 但 是 ， 对 于 二 重 根 二 二 二 1， 
我 们 必须 从 无 穷 多 个 形 如 (a,0,0,0,5,0) 的 解 中 选取 ， 适当 的 解 应 从 满足 表达 式 
(4.6) 的 形式 中 选取 ， 确 实 ， 观 察 一 下 (4.9) 得 知 : RT r=1 以 外 ，xi?” =0, A 
此 ，(4.6) 给 出 pi? Sc? y ?对 一 切 k 和 nn 成立， 但是， 五 是 吸收 状态 ,上 故 有 加 一 0 
对 一 切 k 关 1 成 立 ， 由 此 推出 : 对 r= 二 1， 我 们 必须 形 如 (a,0,0,0,0,0〉 的 解 ， 同 理 ， 
对 应 于 r=2 的 解 是 (0,0,0,0,6,0)， 对 应 于 其 他 的 特征 值 的 解 容易 求 得 ，( 在 计算 中 ， 
那些 解 的 选取 都 展示 在 下 面 诸 和 矩阵 的 第 2 行 .〉 于 是 正则 化 常数 c” 由 (1.14) 决定 ， 
用 上 述 方法 ， 我 们 得 到 了 公式 (4, 6) 中 的 所 有 的 量 . 
在 最 后 的 结果 的 展示 中 ， 对 应 于 r= 二 1 M r= 的 两 个 矩阵 合成 了 一 个 ， 此 外 ， 对 
应 于 r= 二 5 和 rr 二 6 的 元 素 Pr yy” 都 具有 a 土 5V5 的 形式 .为 了 排 印 的 清晰 和 方便 ， 


我 们 把 形 如 a[# 十 1 和 65V5L# 一 龙 ]| 的 贡献 重新 进行 了 总 结 


l. 用 观察 法 可 知 n=, 因为 它 对 应 于 简单 解 : x2 = ag = 二 1,xi1 王 x3 二 Xs 二 x 二 0， 对 应 于 其 他 的 根 
的 三 次 方程 式 是 简单 的 . 


| 和 
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1 000 0 0 
= o 0 0 了 0 0 00 0 0 0 
] 1 一 1 2 0 一 2 1 0 
2 900 Fy Ol orl o oo 0 00 
P= 3 TTI a 20 2 -1 0 
7 9 0 0 F 0 
0 00 0 00 
0 09 00 1 0 0 00 0 00 
+ 0 0 0 + 0 
0 0 0 0 0 
一 ] 4 一 4 一 1 一 2 
+ l —4 4 一 4 l 2 
0 | 一 1 4 一 4 4 一 1 一 ?2 
0 0 0 0 0 0 
4 一 16 16 —16 4 8 
0 0 0 0 0 
一 9 6 6 —9 2 
gte|—ll 4 16 4 一 1]1 一 ?2 
十 | 
40 一 9 6 4 6 一 9 2 
0 0 0 0 0 0 
一 14 16 一 16 16 一 14 12 
00 00 0 0 
—4 2 4 2 ~4 0 
{Bb 9 4 0 4 一 o 2 
40 4 2 4 2 —4 0 
00 00 0 0 
—6 0 16 0 一 6 一 4 
容易 验证 此 公式 对 2=0 也 成 立 ， 男 一 方面 ， 由 (4.6) 右边 的 结构 ， 容 易 看 出 : 


(4.6) 若 对 某 个 nn 成 立 ， 则 它 对 x 十 1 也 成 立 ， 用 这 种 方法 ， 推 出 (4.6) 的 正确 性 无 
需 应 用 第 1 市 的 一 般 理 论 . 


16.5 在 循环 时 间 中 的 应 用 


在 第 13.2 节 习 题 19 中 ， 曾 指出 如 此 用 循环 事件 8 在 第 次 试验 中 出 现 的 概率 久 ， 
来 计算 如 的 循环 时 间 的 均值 y 与 方差 oa， MRE RBM, Ko’ ARR, W 


l ` Log —pty 
2 一 一 而且 > (2 ,一 一 ) 一 9 > . (5.1) 
H n=0 H Ut 


336 * PIGS 有 限 马 尔 可 去 链 的 代数 处 理 


如 果 把 一 个 常 返 状态 五 MAE. Wu=pP (E w= 二 1). 在 有 限 马 尔 可 夫 链 中 ， 
一 切 循环 时 间 都 有 有 限 方 差 (参见 第 15. 14 节 习 题 19)， 所 以 65.1) 可 以 应 用 . B 
E E, 不 是 周期 的 且 d.5 可 以 应 用 . Wn =1 且 | | <1 对 一 切 r 二 2，3,，…: 成 
Ws 故 po 二 jy !， 对 (5.1) 的 项 ww 一 x :， 对 应 于 
pp = > pj tr. (5, 2) 
此 公式 对 一 切 n=l 成 立 ， 把 具有 公 Ser LMA 
(oy? 2) = X ot (5. 3) 
E AO 
m=, MARR oA A 
中 一 局 一 万 十 210 > pit, (5. 4) 


当然 我 们 假设 公式 〈1. 3) 可 以 应 用 而 且 到 三 1， 对 周期 状态 和 出 现 重 根 的 情形 ， 只 需 
作 一 点 点 修改 就 行 . 


第 17 章 最 简单 的 依 时 的 随机 过 程 


17.1 一 般 概 念 。 马尔 可 夫 过 程 


前 一 章 所 讨论 的 马尔 可 夫 链 ， 可 以 非常 粗略 地 描述 为 这 样 一 类 随机 过 程 ， 其 将 
来 的 发 展 只 依赖 于 现在 的 状态 ， 而 不 依赖 于 过 程 的 过 去 的 历史 ， 或 者 说 不 依赖 现在 
这 一 状态 曾 到 过 什么 状态 ， 此 类 过 程 只 包含 可 数 无 穷 多 个 状态 ， 而 且 它 们 只 依赖 离 
散 的 时 间 参 数 ， 即 是 说 ， 状 态 的 变化 只 发 生 在 固定 的 时 刻 ' 1 二 0,1,…， 在 目前 这 一 
章 ， 我 们 将 考虑 下 列 现象 , 电话 呼叫 、 放 射 性 赔 变 、 染 色 体 分 裂 等 等 ， 其 变化 可 以 
发 生 在 任何 时 刻 ， 用 数学 语言 描述 ， 我 们 将 关心 具有 可 数 多 个 状态 但 依赖 连续 时 间 
参数 的 随机 过 程 . 在 离散 概率 的 框架 下 ， 要 完整 地 描述 这 类 过 程 是 不 可 能 的 ， 而 且 
事实 上 ， 此 处 并 不 正式 地 描绘 我 们 感 兴趣 的 那些 马尔 可 夫 过 程 . 为 了 描述 过 程 的 历 
史 ， 我 们 必须 给 定 状 态 发 生变 化 的 时 刻 ， 而 这 包含 了 连续 统 中 的 概率 . “将 来 的 发 展 
不 依赖 过 去 的 历史 ”的 表述 有 着 明显 的 直观 意义 (至 少 与 离散 的 马尔 可 夫 链 类 似 )， 
但 是 ， 正 式 的 定义 却 包 含 了 条 件 概率 的 概念 ， 这 超出 了 本 书 的 范围 但是， 许多 与 
此 类 过 程 有 关联 的 问题 ， 只 要 承认 这 种 过 程 确实 存在 ， 就 可 以 分 别 用 非常 初等 的 方 
法 来 处 理 ， 我 们 将 用 这 种 方式 来 处 理 . 

对 应 于 离散 马尔 可 夫 链 的 转移 概率 ik 现在 是 P), Bll Ze : 在 时 刻 stts 
系统 处 于 状态 已 ; 的 条 件 下 ， 在 时 刻 t 系统 处 于 状态 Ei WRR. ECS AR 
的 ， 此 概率 仅 与 时 间 区 间 的 长 度 上 + 有关， 而 与 它 在 时 间 轴 上 的 位 置 无 关 ， 称 这 种 转移 
概率 为 平稳 的 或 时 齐 的 . 〈 至 于 非 时 齐 的 过 程 ， 将 在 第 9 节 中 处 理 . ) 类 似 于 第 15 章 
(3.3) 的 基本 关系 ， 现 在 是 下 列 查 普 曼 - 科 尔 莫 戈 罗 夫 方程 式 : 

Py(rtt) = >) PDPO, (1.1) 


这 是 基于 下 述 理由 ; BEHA O RAAPRAE, MAALAB j 项 代表 下 列 复 合 事 
件 的 概率 ， 在 时 刻 r 发 现 系统 处 于 状态 E, ， 而 在 以 后 的 rt 十 1 时刻 系统 进入 状态 E 但 
是 在 时 刻 0 处 于 状态 E 到 时 刻 tt 转移 到 状态 E ERA z 必 须 经 过 某 个 中 则 状态 五 ， 
对 所 有 可 能 的 E 求 和 ， 我 们 发 现 A.D 必须 对 任意 固定 的 ) 5>0 和 0 成 六 . 
在 这 一 章 中 ， 我 们 将 研究 基本 方程 式 C.D 的 解 ， 将 会 看 到 ， 对 具体 情形 作 一 


1. 这 一 音 几乎 不 依赖 第 10 至 16 章 .， 术 语 “ 随 机 过 程 ” 的 应 用 ， 请 见 第 15. 13 节 的 脚注 . 
2. 在 前 些 章 中 ， 当 我 们 处 理 随机 过 程 时 ， 我 们 用 时 刻 (epoch) 表示 时 间 轴 上 的 点 ， 在 正式 的 讨论 中 ， 
时 间 (time) 一 词 作 “持续 时 间 ” 用 . 
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些 人 简单 假设 ， 即 可 导出 Pj (2) 的 微分 方程 组 ， 其 至 不 需要 解 这 些微 分 方程 组 ， 就 可 以 
推出 它们 的 一 些 有 趣 的 结果 .这些 结 果 是 很 有 意义 的 ， 因 为 我 们 的 解 实质 上 是 马尔 
可 夫 过 程 的 转移 概率 ， 它 们 由 这 些微 分 方程 组 和 时 刻 0 的 初始 状态 所 惟一 决定 ， 这 
些 耻 观 上 明显 的 事实 将 不 也 证 明 而 承认 之 . 

对 于 固定 的 7 和 zt,Pi (zt) 定义 了 一 个 普通 的 离散 概率 分 布 ， 它 依赖 于 连续 参数 t, 
而 我 们 已 经 遇 到 过 许多 含有 连续 参数 的 分 布 族 . 从 技术 上 看 ， 下 一 节 的 研究 仍然 停 
留 在 离散 概率 的 框架 里 面 ,， 但是， 这 种 人 为 的 限制 在 许多 场 台 都 过 于 生硬 . PAP 
布 fe * CAt)"/nt> 可 以 说 明 这 一 点 ， 它 的 第 0 项 e“ 可 理解 为 在 一 个 固定 的 长 为 ; 
的 时 间 区 间 内 没有 电话 呼叫 的 概率 ， 但 是 ，e 一 也 是 第 1 个 呼叫 的 等 等 时 间 超 过 :的 
概率 ， 因 此 ， 我 们 间接 地 联系 了 一 个 在 时 间 轴 上 的 连续 概率 分 布 ， 在 第 6 节 中 ， 我 
们 将 回 到 这 一 点 来 . 


17.2 YH MA at fe 


基本 的 泊 松 过 程 ， 可 以 从 各 种 不 同 的 角度 来 观察 ， 但 是 ， 此 处 我 们 把 它 作 为 这 
一 章 要 研究 的 过 程 的 一 个 典型 个 例 来 进行 研究 .下面 的 关于 油 松 分 布 的 推导 ， 融 便 
于 推广 来 说 ， 是 最 好 的 ， 但 是 ， 就 其 他 方面 而 言 ， 并 非 很 好 .应 该 把 它 与 第 6.6 市 的 
初等 推导 作 比 较 ， 与 第 12. 2 节 a) 中 作为 独立 增 量 的 最 简单 的 特例 的 沾 松 过 程 作 
比较 . 

为 了 提供 经 验 背景 ， 考 虑 诸如 质点 的 裂变 ， 进 入 的 电话 呼叫 ， 有 害 辐 射 下 染色 
体 的 分 裂 等 随机 事件 ， 假 定 一 切 发 生 的 事件 都 是 同一 类 型 的 ， 而 且 我 们 关心 的 是 长 
为 1 的 任 一 时 间 区 间 内 发 生 的 总 数 Z(1)， 每 一 次 发 生 用 时 间 轴 上 的 一 个 点 来 代表 ， 因 
此 ， 我 们 实际 关心 的 是 直线 上 的 点 的 某 种 随机 分 布 ， 基本 的 物理 假设 是 : 一 种 力量 
和 影响 控制 此 过 程 保 持 稳定 ， 以 使 任何 特定 的 事件 的 概率 对 一 切 长 为 上 的 时 间 区 间 都 
是 一 样 的 ， 而 且 也 不 依赖 过 程 在 过 去 的 进程 ， 用 数学 的 术语 说 ， 这 惑 是 过 程 是 上 一 
节 所 描述 的 时 齐 的 马尔 可 夫 过 程 。 如 前 所 述 ， 我 们 并 不 企图 得 到 这 类 过 程 的 完整 的 
理论 ， 而 只 是 推出 下 述 基 本 概率 : 

P,(t)= PZW) =n}. (2.1) 

这 可 以 由 一 些 简 单 假设 而 不 需 深 刻 理论 就 可 以 严格 地 推出 . 

为 了 引进 的 记号 对 本 章 其 他 的 过 程 也 适用 ， 我 们 选取 一 个 时 间 度 量 的 原点 ， 并 
说 在 时 刻 t2>0 系统 处 于 状态 E, WREE O 与 上 之 加 恰巧 发 生 ” 次 跳跃 .于 是 P, (2) 等 
于 状态 E, 在 时 刻 t 出 现 的 概率 ， 但 是 P, (1) 也 可 以 描述 为 ， 在 任何 时 刻 s 处 于 任何 状 


1. 然而 ， 值 得 注意 的 是 ， 可 能 存在 〈 较 病态 的 ) 非 马尔 可 夫 过 程 具有 同样 的 转移 概率 ， 这 一 点 在 第 
12. 2 节 (a) 中 联系 独立 增 量 过 程 〈 它 是 特殊 的 马尔 可 夫 过 程 ) 讨论 过 .也 可 见 第 9 节 的 讨论 ， 特 
别 是 第 9 节 的 第 1 个 脚注 ， 
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ASE, 到 时 刻 s 十 t 转移 到 状态 忆 ;; ,的 转移 概率 ， 现 在 ， 把 过 程 的 非 正 式 描述 翻译 为 概 
率 P, (1) 的 性 质 . 
让 我 们 把 一 个 单位 长 的 时 间 区 间 分 成 长 为 二 NN 的 NN 个 子 区 间 ， 在 这 些 子 区 间 
中 的 任何 一 个 发 生 一 次 跳跃 的 概率 为 1 一 P,(h)， 从 而 含有 一 次 跳跃 的 子 区 间 的 个 数 的 
WAEA hA [SPA] 人 们 直观 上 觉得 ， 当 hh->0 时 ， 此 数 将 会 收 钱 到 任 一 单位 长 
的 时 间 区 间 内 跳跃 的 次 数 的 期 望 值 ， 因 此 ， 自 然 地 假设 存在 一 个 数 >0 使 得 : 
hi[1— P, Ch) Ja. (2. 2) 
过 程 的 物理 图 象 也 要 求 一 次 跳跃 总 是 把 状态 E 转移 到 邻近 的 状态 Emo MAS 
包 合 多 于 一 次 跳跃 的 子 区 间 (长 为 h) 的 个 数 的 期 望 值 应 该 趋 于 0， 所 以 ， 我们 假设 
当 h0 时 有 
hi[1—P,(h)—P,(h) -0. (2. 3) 
为 了 假设 的 最 后 的 陈述 ， 把 (2. 2) 写作 Ps 《hh) 二 1 一 法 十 oC(h)， 此 处 《如 常规 ) ofA) 
比 h 的 阶 更 小 的 量 .，( 更 精确 地 ，o(h) 表 示 满 足下 述 条 件 的 量 : 4 h0 Hf h oa 一 
0. ) 应 用 这 种 符号 ，(2. 3) 等 价 于 PCA) =Ah both), WRN : 
关于 泊 松 过 程 的 假设 ， 过程 在 时 刻 0 由 状态 E 出 发 ，(D ARSE 只 能 直接 转 
SSE... GD 无 论 在 时 刻 上 处 于 什么 状态 下 ; ， 在 上 与 1 十 六 之 间 的 充分 小 的 时 间 区 
间 内 恰 有 一 次 跳跃 的 概率 为 信 十 o(P)， 而 有 多 于 一 次 跳跃 的 概 滨 为 oh). 
如 前 一 节 所 解释 的 ， 这 些 条 件 比 我 们 开始 时 提出 的 概念 〈 过 程 的 已 往 历 史 不 影 
了 响 将 来 的 进程 ) 要 弱 . 另 一 方面 ， 此 处 的 假设 是 纯 分 析 性 质 的 ， 它 们 充分 保证 能 推 
出 我 们 所 需要 的 下 述 公 式 : 


P, (0) = er. (2. 4) 
ri 


为 了 证 明 这 一 公式 .首先 假定 nlite PRS: 在 时 刻 :十 h 系统 处 于 状态 EE，. 
此 事件 的 概率 为 P, (1 十 h)， 而且 此 事件 有 三 种 互 斥 的 方式 发 生 ， 第 一 ， 存 时 刻 1 系统 
处 于 状态 E,， 而 在 1 与 1 十 h 之 间 没 有 跳跃 发 生 ， 此 事件 的 概率 为 
P, (#1) P, (hh) =P, (DL1—Ah J+ fh). 

第 二 种 可 能 ， 在 时 刻 1 系统 处 于 状态 EF,_1 ， 而 在 1 与 :十 h ZAREK, Ie 
事件 的 概率 为 P,_, (1)， 娄 十 ol(h)， 第 三 ， 在 时 刻 t 处 于 其 他 任何 状态 〔( 非 E,， 亦 非 
E 0) 都 要 求 在 1 与 1 十 h 之 间 发 生 一 次 以 上 的 跳跃 ， 此 事件 的 概率 为 o(h)， 忆 之 ， 
我 们 有 : 


P. a+h) =P, 1—-Ah) +P, DM roth) (2.5) 
而 此 关系 式 可 重 写成 如 下 形式 
PTE 一 一 1P (t)+AP,-1 (D+ (2, 6) 


1. 首先 引入 假设 〈2. 2) ， 是 因为 它 易于 推广 到 其 他 过 程 . 在 目前 的 情形 下 ， 48 E SR e Bl Po Cc) TE A 
KBR: PottoO=Po(OPo), JERAT (2.2). CHER 6D.) 
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当 h->0 时 右边 最 后 一 项 趋 于 0， 因此 ， 左 边 的 极限 存在 ! 而 且 


P,O = AP, (1) +AP,,-; (2) (n=l). (2.7) 
对 于 ”一 0， 上 述 第 二 和 第 三 种 情况 不 会 发 生 ， 从 而 2.7) 代 之 以 下 述 方程 式 : 
Po (tth)=P,C)(1—-M) tolh), (2. 8) 
由 此 推出 : 
P’,(t)=—AP, (2). (2.9) 


由 此 及 P,(0)= 二 1 得 PEOS. WIERA (2.7) 中 7m 一 1 的 场合 得 P; (71) 的 常 微分 
TEA. HP O= 易 知 已 O=aAe”, KH (2.4) FAB. 用 类 似 的 方法 ， 可 逐次 
求 出 (2.4) 中 的 所 有 的 项 . 
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泊 松 过 程 的 最 简单 的 推广 可 由 下 述 办 法 得 到 : 允许 跳跃 的 概率 依赖 系统 所 处 的 
现实 状态 ， 这 使 我 们 导出 下 述 . 

假设 D ARSE 只 能 直接 转移 到 天 ij -1 Gi) FARANAtRERAE,. 
在 上 到 L 十 六 的 充分 短 的 时 间 区 间 内 恰 有 一 次 跳跃 发 生 的 科 率 为 人 彤 十 o(j) ， 而 在 上 述 
时 间 区 间 内 有 多 于 一 次 跳跃 发 生 的 概率 为 olh). 

此 假设 的 显著 的 特征 是 : 系统 在 任何 特殊 状态 所 花费 的 时 间 不 起 作用 ， 系 统 停 
留 在 单个 状态 时 ， 会 有 状态 的 突然 改变 而 无 老化 现象 . 

再 令 P, (1) 是 系统 在 时 刻 t 处 于 状态 EF, HERK. AA P,(?) 满 足 一 组 微分 方程 式 ， 
它 可 用 上 一 节 的 方法 推出 ， 只 不 过 用 下 列 方程 式 


P. a+b =P, DAAA) tP, Da, ih toh). (3.1) 
RE (2.5) BT. 用 这 种 方法 得 到 基本 方程 组 
PED) 5 A, P pa OD +A,-1 Py D (n=l), (3.2) 


P',(t)=—AyP, (2). 
在 泊 松 过 程 中 ， 自 然 地 要 假设 系统 在 时 刻 0 从 初始 状态 E, 出 发 ， 现 在 我 们 更 一 
般 地 假定 系统 从 任 一 个 初始 状态 E HE. KAMI.: 
P,(0)=1, P,(0)=0 当 ni BY. (3. 3) 
这 些 初 始 条 件 惟 一 地 决定 了 (3. 2) 的 解 {P(t)}.， [特别 地 ，P, (人 三 万 OS = 
P_,()=0. | 许多 学 者 已 经 独立 地 推出 了 P, (1) 的 精确 公式 ， 但 是 我 们 对 此 并 无 多 大 闪 
B. RERE: 对 于 任意 给 定 的 *,， 系 统 {P,(1) ) 除 了 在 某 些 条 件 下 有 PC2) 二 1 以 


L AARET ARE, CLD 中 的 P(t) 应 理解 为 右 导 数 ， 实际 上 它 是 通常 的 双边 导数 . 事实 上 ， 
(2.5) 中 的 ol) 不 依赖 :， 所 以 用 th 代 z 它 保持 不 变 ， 所 以 (2.5) 蕴涵 了 通常 意义 下 的 连续 性 ， 
而 (2.6) 蕴涵 了 通常 意义 下 的 可 微 性 ， 此 附注 通 章 使 用 ， 以 后 不 再 复述 . 

2. 以 后 将 会 发 现 ，P; (7) 与 第 1 节 中 的 转移 概率 Pa ORAM. 
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外 ， 它 满足 通常 要 求 的 一 切 性 质 ，2>P, (i) 过 1 的 现象 ， 将 在 第 4 节 中 讨论 . 

例 (a) 放 射 性 晓 变 具有 放射 性 的 原子 ， 例如 说 铀 原子 ， 可 以 通过 质点 或 7y 射 
线 的 放射 而 变 成 另 一 类 原子 ， 每 一 类 原子 表示 系统 的 一 个 可 能 状态 ， 当 过 程 继续 下 
去 时 ， 我 们 得 到 了 转移 ELSE, SE, >E,. 根据 公认 的 物理 理论 ， 只 要 原子 处 于 
状态 E, ABA, RB: FE, 一 上 ,的 概率 是 不 变 的 此 假定 在 我 们 的 初始 假设 中 就 已 
表述 过 ， 因 此 ， 此 过 程 由 微分 方程 组 (3. 2) 来 描述 (物理 学 家 对 此 事实 是 熟知 的 ). 
如 果 E, 是 不 能 由 它 进 一 步 转移 到 其 他 状态 的 终结 状态 ， 则 ,一 0， 而 且 方 程 组 
(3.2) RIEF n=m. (MF n>m, WA P,a) =0. | 

(b) AR (Yule) 2H. 考虑 一 个 总 体 ， 其 成 员 能 通过 分 裂 或 其 他 方式 产生 新 
成 员 ， 但 不 会 死亡 ， 在 长 为 的 任意 短 的 时 间 区 间 中 ， 每 个 成 员 产 生 一 个 新 成 员 的 
概率 为 灶 十 oth)， 其 中 常数 决定 了 总 体 的 增长 速度 如果 成 员 之 间 无 相互 作用 ， 
而 且 在 时 刻 t 总 体 的 大 小 为 x， 则 在 (Gi,t 十 h) 中 总 体 增 大 的 概率 为 Mh tolh). A, 
MATER t An 个 成 员 的 概率 P, (1) 满 足 具 有 系数 4 一双 的 方程 组 (3.2)， 
即 是 : 


P (1)=—mP,(0) + (nm AP, C) (n1). (3.4) 
P ( 门 一 0. 
设 总 体 的 初始 大 小 为 i, 则 初始 条 件 (3. 3) 成 立 ,而 且 易 证 对 一 切 ni 有 
Pos ("Jeane o (3.5) 
n+ 


当然 还 有 : A nciht P,Q) 二 0 (对 一 切 才 ， 应 用 第 6 章 (8.1) 的 负 二 项 分 布 的 记号 ， 
可 以 把 (3.5) 重 写 为 P,() 二 了 f(n 一 i;1,e*)， 由 此 推出 [参见 第 9. 3 DR (Co): 在 时 
刻 总体 的 大 小 是 ;个 相互 独立 的 随机 变量 之 和 ， 而 其 中 每 个 随机 变量 的 分 布 可 在 
(3.5) 中 以 1 代 : 而 得 到 ， 这 :个 随机 变量 代表 总 体 的 ;个 初始 成 员 的 后 代 ， 

此 类 过 程 ， 首 先是 由 尤 尔 : 联系 进化 论 中 的 数学 理论 来 研究 的 . 总 体 是 由 一 个 同 
一 属 中 的 物种 组 成 的 ， 新 元 素 的 产生 是 由 于 变异 . “每 一 物种 产生 新 种 具有 相同 的 概 
率 ” 的 假设 忽略 了 物种 的 大 小 上 的 差别 ， 我们 还 忽略 了 物种 灭绝 的 可 能 性 ， 因 此 ， 
可 以 预料 ， 公 式 (03.5) 只 能 给 出 一 个 粗糙 的 壳 近 . 

gp OO OW, H. Furry) 曾 用 相同 的 模型 来 描述 与 宇宙 射线 有 关 的 过 程 ， 但 通 近 仍 
然 很 粗糙 ， 微 分 方程 组 〈3. 4) 能 严格 地 应 用 于 下 述 质 点 的 总 体 : 这 种 质点 分 裂 出 来 
的 是 完全 相同 类 型 的 质点 ， 而 且 质 点 之 间 没 有 相互 作用 . > 


1. 参见 [111]， 该 书 以 [112] 的 理论 为 基础 。 尤 尔 并 未 引入 微分 方程 组 (3.4)， 而 是 使 用 类 似 于 第 
6.5 节 中 关于 泊 松 过 程 曾 使 用 过 的 极限 过 程 来 推出 P, (1) 的 。 肯 德里 克 (A. G. M Kendrick) 在 [113] 
中 设计 了 此 类 过 程 的 一 种 更 一 般 更 灵巧 的 模型 ， 并 用 之 于 流行 病 和 总 体 的 增长 问题 中 ， 遗 憾 的 是 : 
这 篇 杰出 的 论文 并 未 受到 重视 ， 特 别 是 ， 本 书 作者 在 引进 总 体 增长 的 各 种 随机 过 程 的 模型 时 ， 也 不 
知道 此 结果 . 
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"17.4 友 散 的 生 过 程 


无 穷 的 微分 方程 组 (3.2) 在 初始 条 件 (3.3) F, E (P,a) 可 以 P,(1)= 
e 了 出 发 归纳 地 算出 ， 所 以 分 布 1 忆 (Co } 是 惟一 决定 的 ， 从 解 线性 微分 方程 组 的 熟知 
的 公式 还 可 知己,( 轧 0， 惟 一 剩 下 来 解决 的 问题 是 : (PD) 是否 确实 是 一 个 概率 分 
布 ， 即 是 否 对 一 切 上 都 有 


2 P,(t)=1. (4. 1) 
我 们 将 要 看 到 ， 并 非 总 是 如 此 ， 如 果 系 数 4, 增加 得 非常 快 ， 可 能 有 
2,P, (1)<1. (4. 2) 


当 这 种 情况 出 现时 ， 会 令 人 人 不安， 但 却 有 现成 的 解释 . (4.2〉 左 边 可 解释 为 在 长 为 t 
的 时 间 区 间 内 仪 发 生 有 限 次 跳跃 . 因此 ， (4. 2) 两 边 之 差 正 说 明 无 穷 多 次 跳跃 或 某 
种 爆炸 的 可 能 性 .为 了 更 好 地 理解 这 种 现象 ， 让 我 们 把 此 处 的 增长 概率 模型 与 熟知 
的 决定 性 的 方法 作 一 比较 . 

(3.2) 中 的 量 可 称 为 大 小 为 n 的 总 体 的 平均 增长 率 例如 ， 在 特殊 情形 
(3.4) 下 ，A, 王 又 ， 故 平均 增长 速度 与 总 体 的 实际 大 小 成 正比 如果 增长 不 受 随机 起 
伏 的 影响 ， 而 且 增 长 速度 与 总 体 的 瞬时 大 小 x(2) 成 正比 ， 则 x(2) 满 足下 述 决 定性 的 


dr) __ 
由 此 推出 
x(t) =e", (4.4) 


此 处 三 z(0) 是 总 体 的 初始 大 小 ， 立 即 可 见 ， 分 布 (3. 5) WBS nP, Sra), A 
此 ，x() 不 仅 描 述 了 一 个 决定 性 的 增长 过 程 ， 而 且 也 描述 了 第 3 节 例 〈b) 中 的 总 体 
大 小 的 期 望 . 

现在 让 我 们 考虑 这 样 的 确定 性 的 增长 过 程 : 它 的 增长 率 的 上 升 要 比 总 体 大 小 上 
升 得 快 ， 当 增长 率 与 x (9 成 比例 时 ， 对 应 的 微分 方程 式 为 : 


drt) __ 2 
其 解 为 ; 
1 
rD =I (4. 6) 


注意 ， 当 eli t, cOLABASK. Wa, BERK EA KERIDER 
小 的 平方 时 ， 那 么 ， 在 有 限 的 时 间 区 间 内 会 无 限 增长 .类似 地 ， 如 果 G.O RA A, 
上 升 得 太 快 ， 则 在 有 限 的 时 间 区 间 内 发 生 无 穷 多 次 变化 的 概率 为 正 ， 下 述 定 理 给 出 


x 本 节 处 理 特殊 的 主题 ， 可 略 去 . 
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了 发 散 增长 的 条 件 一 个 精确 的 回答 . 
定理 UP) 二 1 对 一 切 1 成 立 的 充分 必要 条 件 是 级 BQ, BB! 


证 + 
SHS P aD PO. (4.7) 
由 单调 性 可 知 极限 
u (t)=lim[1—S,(2) J (4. 8) 
存在 .把 诸 微 分 方程 式 (3.2) 对 n= 二 0，…， 上 加 起 来 可 得 
SS. =—A,P, (2). (4.9) 
由 初始 条 件 〈3. 3) 及 上 述 微分 方程 式 推出 对 一 切 kai 有 
1 一 S CD 一 | P, CD dr. (4. 10) 
由 (4.8) 可 知 上 式 左边 落 在 /与 1 之 间 ， 所 以 
ODK | PO dA. (4.11) 
Xf k=i, +, n RAPIN, MEY ”之 : 有 : 
u(t) Lap ee tay IS | S,(s)dsA tee +A, ， (4.12) 


Da <o. 4 nokt, RAWIS -MEARN, Ke, WIR RA ABEX — H t 
都 趋 于 BZ, ELi =o. HB-TASRA: pO) =0 H t Mae. H 
(4.8) 可 得 S,(t) 一 1， 定 理 证 毕 . > 

若 用 概率 解释 ， 此 准则 是 合理 的 ， 系 统 停 在 初始 状态 E 耗费 一 段 时 间 后 转移 到 EL. Æ 
E, 停留 一 会 儿 转移 到 E, ， 等 等 . EE 的 逗留 时 超过 上 的 概率 由 〈3.2) 给 出 如 下 : Pos 
eo, JX MERA T 是 一 个 随机 变量 ， 其 像 域 是 正 的 t- 轴 ， 因 此 形式 上 看 ， 它 超出 了 本 书 的 
范围 ， 然 而 ， 从 几何 分 布 到 指数 分 布 的 跃 度 不 大 ， 我 们 可 以 跳 过 一 个 细节 而 于 事 无 损 ， 用 具 
有 几何 分 布 的 离散 随机 变量 来 通 近 T 看 出 ， 自 然 地 要 定义 在 E 的 扣留 时 的 期 望 为 


EC To ) 一 | te *0'), dt 二 A0 1, (4.13) 


在 系统 进入 E 那个 时 刻 ，E; 取代 了 初始 状态 的 角色 ， 类 似 的 结论 可 用 于 在 E 的 逗留 时 六 
在 EE 的 这 留 时 的 期 望 为 E(T;)== 和 7!， 由 此 推出 ; Aol tar! ++ ti 是 系统 经 过 状态 Eo, 
E e, E, 所 需 的 时 间 的 期 望 值 ， 我 们 可 以 把 第 4 节 的 准则 复述 如 下 : 

3,P,(1) 二 ] 对 一 切 1 成 立 的 充分 必要 条 件 是 

DET = Aj =O, (4. 14) 

PH, EE, Ey, E, e EXO OO 1 Og B00 Hoo, MR LaS LP. 
是 系统 在 时 刻 t 以 前 已 经 经 过 全 部 状态 的 概率 . 

通过 这 种 解释 ， 不 等 式 (4. 2) 中 的 概率 变 得 可 以 理解 了 .， 如果 在 状态 E 的 逗留 时 间 的 


1. 不 难看 出 ， 不 等 式 习 P, O<1 要 么 对 一 切 Ry, 要 么 没有 一 个 0 使 不 等 式 成 立 . 见习 题 
22, 


344 第 17 章 最 简单 的 依 时 的 随机 过 程 


期 户 为 2 ， 则 系统 在 1 十 2 十 2 局 十 … 二 2 个 时 间 单 位 经 过 全 部 状态 的 概率 大 于 0。 类 似 地 ， 
以 指数 增长 的 速度 运动 在 x- 轴 上 的 质点 在 有 限时 间 内 穿越 整个 的 x+- 轴 . 
| 在 第 9 WB (b 中 还 要 回 到 发 散 的 生 过 程 . ] 


17.5 Æ K wt f& 


第 3 PAA DERE RET TO AIR, (B72. ERG 
作为 其 成 员 可 能 死亡 GRR) 的 总 体 的 大 小 的 变化 的 实际 模型 . 这 就 局 发 我 们 将 
上 述 模型 作 如 下 推广 ， 由 状态 E, 不 仅 人 允许 问 邻 近 的 较 高 的 状态 三， 转移， 也 人 允许 加 
邻近 的 较 低 的 状态 E 转移. 〈 更 一 般 的 过 程 将 在 第 9 节 中 定义 .〉 因此 ， 我 们 从 下 
E AY (Bes h A. 

假设 ”系统 的 变化 仅 通过 其 状态 向 邻近 的 状态 转移 (4H nal eH. E, 可 以 转移 到 
EnA E1, E, RRSBAE,) 而 发 生 . 如 果 在 时 刻 t 系统 处 于 状态 EE,， 则 在 1 
到 1 十 之 内 发 生 下 ,一 忆 , ,| 的 转移 的 概率 为 A 十 ol 有)， 而 发 生 忆 ,一 FE, 1 《如 果 n 宇 1) 
的 转移 的 概率 为 uh 十 ol(h)， 在 时 间 区 间 Ct, tth) 内 发 生 多 于 一 次 变化 的 概率 为 
oth), 

容易 修改 第 2 节 的 方法 以 推出 系统 在 时 刻 t 处 于 状态 上 ; AE PC) EY 
分 方程 组 .为 了 计算 Path), 注意 ， 在 时 刻 t 十 h 系统 处 于 上 , 只 有 满足 下 列 条 件 之 
一 才 有 可 能 发 生 : (1) 在 时 刻 t ASA E,, Met St rh 之 间 无 变化 发 生 ; 
(2) 在 时 刻 1 系统 处 于 FE,!， 而 在 1 与 1 十 h 之 间 发 生 一 个 转移 EE,_; ES; GC) 在 时 
刻 上 系统 处 于 已 ， 而 在 时 刻 1 与 1 十 h 之 间 发 生 一 个 转移 ,~>E,; (4) 在 1 写 t 十 h 
之 间 发 生 多 于 一 个 转 称 ， 由 假设 ， 最 后 一 个 事件 的 概率 为 oC(h)， 而 前 三 个 事件 是 互 
斥 的 ， 从 而 它们 的 概率 可 以 相 加 ， 因 此 

P, G+H SP, (1~Ah— ph } A ihP, O Tp hPa Doth). (5.1) 
把 P, (2) 移 项 至 左边 ， 再 将 两 边 除 以 hh 并 对 h->0 取 极 限 得 


P’,(t)=— An F n) Pa O) HA Pra (OD F pi Prt O). (5. 2) 
此 方程 式 对 一 切 nal 都 成 立 . 对 n 二 0， 用 同样 的 方法 可 得 : 
P's E) = — ào Po E) Hea Pi C). (5. 3) 
如 果 初 始 状态 是 五 ， 则 初始 条 件 是 
P,(0)=1, P,(0)=0 (24 ni). (5. 4) 


因此 我 们 看 出 ， 生 灭 过 程 依赖 于 无 穷 微 分 方程 式 组 〈5.2) 一 (5.3) 并 满足 初始 
条 件 (5. 4)， 在 此 情形 ， 解 的 存在 惟一 性 决 不 是 不 足 道 的 .在 纯 生 过 程 中 ,微分 方 
程式 组 (3. 2) 也 是 无 穷 的 ， 但是， 它们 有 递 推 关 系 ，P。 (2) 由 第 一 个 方程 式 决定 ， 而 
P OTARA P, (1) 所 算出 ， 新 的 方程 组 〈5. 2) 不 是 这 种 形式 ， 所 有 的 P, (2) 必 须 同 
时 求 出 ， 在 这 里 (以 及 本 章 其 他 地 方 ) 只 陈述 解 的 性 质 而 不 予 证 明 .* 


1. 简单 的 存在 性 证 明 与 惟一 性 准则 可 以 由 作者 给 出 的 一 般 理论 的 特殊 情况 中 得 到 〈 见 第 9 节 )， 满足 条 
FEP <1 的 生 灭 过 程 的 解 最 近 引 起 了 许多 作者 的 广泛 注意 ， 可 参见 : [115] [16] [117] [118]. 
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xf FALE ey RBA, 0, 20, (5.2) 一 (5.4) 总 存在 一 组 正 的 解 { 卫 (6 } 满 
RE 2 忆 (i 安 1， 如 果 系 数 有 界 〈 或 者 上 升 得 比较 慢 )， 此 解 是 惟一 的 而 且 满 足 正 则 化 
Slt UP O=1. Ail, TARRE UP OK 而 且 存 在 无 穷 多 组 解 . 在 后 面 
这 种 场合 ， 我 们 会 遇 到 在 前 一 节 中 类 似 于 纯 生 过 程 所 研究 过 的 现象 . 这 种 情况 ， 具 
有 重要 的 理论 意义 ， 但 读者 放心 ， 关 于 惟一 性 的 条 件 ， 在 所 有 具有 实际 意义 的 情形 
下 都 是 满足 的 ， 在 这 种 情况 下 ， 自 然 有 之 已 ,( 六 三 1 (MR 9T). 

当 二 0 时， 转移 EE, 是 不 可 能 的 ， 用 马尔 可 夫 链 的 术语 来 说 ， 五 , 是 吸收 状 
态 ， 从 它 不 可 能 流出 ， 一 旦 系统 处 于 E 就 永远 停留 在 Eh， 由 〈5.3) 推出 ， 在 这 种 
情况 下 有 POZ, AREA P, (tb) 单 调 上 升 ， 极限 Pu(Ccoe) 是 最 终 被 吸收 的 概率 . 

可 以 证 明 (或 者 从 解 的 精确 表达 式 出 发 ,或 者 从 马尔 可 夫 过 程 的 一 般 遍 历 定理 
出 发 )， 在 任何 情况 下 ， 极 限 

limP, (1) = p, (5.5) 
存在 且 不 依赖 于 初始 条 件 〈5.4)， 它 们 满足 在 〈5.2) 一 (5.3) 中 代 己 .6 以 0 所 得 到 
的 线性 方程 组 ， 

关系 式 6.5) 54 15.7 节 中 所 推出 的 通常 的 马尔 可 夫 链 的 极限 定理 相似 ， 而 且 

这 种 相似 之 处 比 形式 的 东西 还 要 多 ， 直 观 上 看 ， 把 我 们 的 过 程 与 具有 转移 概率 


Prin~l =~ , Prin =n C9. 6) 
的 简单 的 马尔 可 夫 链 作 比 较 ，(5.5) 就 变 得 很 明显 了 ， 在 此 马尔 可 夫 链 中 ， 仅 有 下 
HPP Hi: E, ~E m M E, 一 E, 1!， 而 且 其 条 件 概 率 与 我 们 的 过 程 的 条 件 概 率 
是 一 样 的 ， 此 链 与 我 们 的 过 程 的 差异 仅仅 在 于 : 后 者 能 在 任何 时 刻 发 生变 化 ， 所 以 
在 长 为 1 的 时 间 区 间 内 发 生 转 移 的 次 数 是 一 个 随机 变量 ， 然 而 ， 对 于 大 的 :， 此 数 必 
然 很 大 ， 因 此 ， 当 tco 时 ， 概 率 P, (1) 的 性 态 与 简单 链 的 对 应 的 概率 的 性 态 相 同 是 
可 以 想像 的 . 

如 果 具 有 转移 概率 〈5.6) 的 简单 链 是 暂 留 的 ， 那么 对 一 切 n RWA p= 0, WMR 
链 是 遍历 的 ， 则 {p,) 定义 出 一 个 平稳 概率 分 布 ， 在 此 场合 ，(5. 5) 通常 解释 为 “ 趋 
向 稳定 状态 的 条 件 ”， 而 此 命名 引起 过 许多 混乱 ， 必 须 了 解 : 除了 E 是 吸收 状态 以 
外 ， 随 机 起 伏 一 直 不 会 减弱 ， (5.5) 仅仅 说 明 : 在 长 连贯 中 ， 初 始 条 件 的 影响 不 会 
出 现 . 第 15. 7 节 中 关于 统计 平衡 的 附注 可 以 不 加 改动 地 移 置 于 此 . 

后 灭 过 程 的 主要 应 用 领域 是 ; 等 待 时 间 问 题 、 占 线 问题 等 等 ， 见 第 6 市 与 第 
7 节 . 

Gl 〈a) 线 性 增长 ， 假 定 总 体 由 一 些 既 能 分 裂 又 可 能 会 死亡 的 元 素 所 构成 ， 在 长 
为 的 很 短 的 时 间 区 间 内 ， 一 个 活着 的 元 素 分 裂 成 二 个 的 概率 是 Atoh), MEA 
的 概率 是 /十 o(h)， 此 处 和 和 是 两 个 刻画 总 体 的 常数 .假定 各 元 素 之 间 没 有 相互 
作用 ,我 们 导出 一 个 具有 LEM, mom 的 生 灭 过程 ， 基 本 的 微分 方程 式 组 取 下 述 
形式 : 
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PO SP), 

忆 ,明王 一 (十 [0072P, O HA1) P, O+ut Pi @. 
可 以 求 出 精确 解 (参见 习题 11 一 14) ， 但 此 处 不 打算 讨论 这 方面 的 问题 .极限 (5. 5) 
存在 ， 而 且 满 足 P, O 代 之 以 0 的 方程 组 6.7). 由 第 一 个 方程 式 得 po. 二 0， 用 归 
纳 法 ， 由 第 二 个 方程 式 得 p, = 0 对 一 切 n 之 1 成 立 ， 如 果 po 二 1， RIRA K H 
概率 为 l; wR pol, mi Pi = p: = = 0 ZAR T: 总 体 的 大 小 增值 得 超过 任 一 上 界 
的 概率 为 1 一 名 .最 后 ， 总 体 或 者 灭绝 或 者 无 限 增值 . 为 了 求 出 灭绝 概率 pos RIE 
较 此 过 程 和 相关 的 马尔 可 夫 链 ， 在 我 们 的 情况 下 ， 转 移 概率 (5. 6) PREF n W 
此 ， 得 到 一 个 通常 的 随机 徘徊 ， 它 向 右 和 问 左 移 的 概率 分 别 为 p 二 A/ (十 py) 和 Q=p/ 
Qty»). RAS E, 是 吸收 的 .从 古典 破产 问题 (参见 第 14. 2 节 ) 得 知 ， 当 pq ht K 
绝 概率 是 1; mgp 时 此 概率 为 (qg/p)， 其 中 i 是 初始 状态 .我们 可 得 出 结论 ， 
当 < 时， 最 终 灭绝 的 概率 po 二 limP。(t) 等 于 1; MEAS, p5 AY. 
(这 从 精确 解 易于 验证 ， 见 习题 11 一 14.) 

如 像 许 多 类 似 的 情形 一 样 ，(5.7) 的 精确 解 是 比较 复杂 的 ， 因 此 ,我们 希望 直 

接 从 微分 方程 式 组 来 直接 求 分 布 (P,O) 的 均值 和 方差 . 
关于 均值 ， 我 们 有 


(5.7) 


Mt) = SI nP, Ct). (5. 8) 
我 们 略 去 M(D) 为 有 限 和 下 面 的 形式 运算 的 合理 性 〈 此 二 者 均 易 由 习题 12 所 给 的 解 也 
出 ) 的 证 明 ， 乘 第 二 个 方程 式 以 并 对 ”一 1,2… 求 和 ， 我 们 发 现 含 ” 的 项 消去 了 ， 
于 是 得 : 


MOSA nP, OD — ae Unt) Py O=A- WM). (5.9) 
这 是 关于 M(t 的 一 个 微分 方程 式 ， 总 体 的 初始 大 小 是 1， 所 以 MO) =i AE 
M(t) =1e? ar, (5.10) 


由 此 可 见 ， 4 a<u 时 均值 趋 于 0; 而 当 )>x 时 ， 均 值 趋 于 <e， 用 类 似 的 方法 可 算出 
A P.) 的 方差 . [参见 习题 14. | 

(b) 单线 路 的 等 待 队 列 ， 最 简单 的 情形 是 常 系数 和 二 A4，p 王 py， 这 时 ， 生 灭 过 程 
化 为 第 7 节 例 Cb) 中 4==1 时 的 等 待 队 列 的 特殊 情形 . 


17.6 指数 持续 时 间 


生 灭 过 程 的 主要 应 用 领域 是 : 电话 通 迅 中 的 占线 问题 ， 各 种 电话 、 计 数 囊 、 机 
器 的 等 待 队列 问题 ， 这 类 问题 可 以 用 各 种 近似 程度 不 同 的 数学 方法 来 处 理 ， 生 灭 过 


1. 通常 的 方法 是 ; HEM EPROP, O” 所 满足 的 微分 方程 式 . 在 [119] 中 详细 讨论 了 人 允许 (5. 5) 
中 的 系数 依赖 时 间 的 更 一 般 的 过 程 . 也 可 见 同一 作者 的 论文 [120]. 在 那里 对 理论 作 了 推广 以 便 研 
究 生 物 总 体 的 年 龄 分 布 . 
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程 的 方法 提供 了 一 种 最 简易 的 途径 ， 但 这 种 模型 基于 一 种 数学 简化 ， 即 假设 持续 时 
闻 是 指数 型 的 .我 们 首先 讨论 这 个 基本 假设 . 

为 了 语言 具体 起 见 ， 考 虑 电话 会 话 ， 并 设 会 话 时 间 的 长 度 必 须 是 整数 秒 . 把 会 
话 时 间 的 长 度 X 作 随机 变量 来 处 理 ， 并 设 概 率 分 布 p, 二 P(X 二 n) 已 知 ， 于 是 电话 
线 是 一 个 具有 两 个 可 能 状态 E CCR) 或 E (空间) 的 物理 系统 ， 当 电话 线路 忙碌 
时 ， 王 一 秒 钟 状态 的 变化 的 概率 与 会 话 已 经 进行 了 多 长 时 间 有 关 . 换 句 话说 ， 过 去 
对 将 来 有 影响 ， 从 而 我 们 的 过 程 不 是 马尔 可 夫 过 程 〈 见 第 15. 3 节 ). 这 一 情 澳 是 图 
难 的 根源 ， 不 过 ， 存 在 一 种 我 们 曾 在 第 13. 3 节 中 所 讨论 过 的 简单 的 例外 情形 . 

设想 每 一 秒 钟 会 话 是 否 继续 下 去 ， 由 扔 一 个 不 对 称 的 硬币 来 决定 .详细 地 说 ， 在 
一 个 成 功 概率 为 户 的 伯 努 利 试验 序列 中 ， 假 定 每 秒 钟 进行 一 次 ， 直 到 第 1 次 出 现成 功 
为 止 ， 第 1 次 成 功 一 出 现 ， 会话 立即 停止 .在 这 种 情况 下 ， 会 话 时 间 的 总 长 度 即 “ 持 
续 时 间 ” 具 有 几何 分 布 p= 二 9 1p， 当 线路 忙碌 时 ， 下 一 秒 它 仍然 忙碌 的 概率 是 9， 而 
下 一 步 出 现 转 移 EE, 的 概率 是 p， 现 在 ， 这 些 概 率 不 依赖 线路 已 经 忙碌 了 多 久 了 . 

如 果 不 想 用 离散 时 间 参 数 ， 我 们 就 必须 与 连续 型 的 随机 变量 打交道 ,等 每 时 的 
几何 分 布 被 指数 分 布 所 取代 ， 这 是 惟一 的 具有 马尔 可 夫 性 的 分 布 ， 即 是 说 ， 完 全 无 
记忆 的 分 布 ， 换 句 话 说， 在 时 刻 x 进行 着 的 会 话 继续 进行 到 xz 十 h 以 后 的 概率 与 会 话 
已 持续 的 时 间 无 关 ， 其 充分 必要 条 件 是 : 会 话 持续 1 个 以 上 的 时 间 单 位 的 概率 由 指数 
分 布 ez 所 给 出 ， 该 “指数 持续 时 间 分 布 >， 我 们 曾 在 〈2.4) 中 的 泊 松 分 布 的 第 0 项 
遇 到 过 ， 即 是 作为 到 第 1 次 变化 发 生 时 所 需 的 等 待 时 间 的 分 布 . 

后 灭 过 程 的 方法 只 有 当 问 题 中 的 转移 概率 不 依赖 过 去 才能 应 用 ， 对 于 占线 问题 
和 等 待 线 问题 ， 这 意味 着 持续 时 间 必 须 服 从 指数 分 布 ， 从 实际 观点 来 看 ， 此 假设 初 
看 可 能 不 自然 ， 但 经 验证 明 ; 它 合理 地 描述 了 实际 现象 ”特别 地 ,许多 测量 表明 ， 
-个 城市 的 电话 会 话 的 时 间 的 长 度 以 惊人 的 精确 度 服 从 指数 分 布 律 .' 对 其 他 一 些 持 
续 时 间 (如 机 器 维修 的 持续 时 间 〉 也 是 如 此 . 

还 要 刻画 所 谓 的 输入 流 karp, MEURS, SF). BEEKA h 的 时 间 
区 间 内 ， 来 到 一 个 呼叫 的 概率 为 六 与 一 个 可 忽略 的 项 的 和 ， 而 且 多 于 一 个 呼叫 的 概 
率 在 取 极 限 中 可 以 略 去 ， 根 据 第 2 节 的 结果 ， 这 意味 着 来 电 呼 叫 次 数 服 从 均值 为 
的 泊 松 分 布 ， 我 们 称 这 种 输入 流 是 密度 为 人 的 泊 松 型 输入 流 ， 

容易 验证 指数 持续 时 间 的 上 述 性 质 ， 令 u ORBAN BY A t 个 时 间 单 位 的 概率 
从 0 开始 的 会 话 持续 到 +s 以 后 的 概率 u(s 十 ， 等 于 它 持 续 t 个 单位 WEAR eR EC AE 
会 话 超过 + 的 条 件 下 剩余 会 话 时 间 还 要 超过 * 个 时 间 单 位 的 条 件 概率 ， 如 果 过 去 的 持续 时 间 无 
影响 ， 则 后 面 这 一 条 件 概 率 等 于 us). Pre 

u(t+s)=ult)uls). (6.1) 

为 了 证 明 指 数 型 持续 时 间 的 前 述 特征 ， 只 需 证 明 : 函数 方程 式 (6. 1) 的 单调 解 必须 形 如 ee“. 


L 长 途 电 话 话费 通常 在 三 分 钟 后 增加 收费 ， 因 此 ， 持 续 时 间 经 常 近似 地 为 三 分 钟 ， 在 此 情况 下 ， 指数 
分 布 不 能 应 用 . 
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我 们 证 明 下 面 稍为 强 一 点 的 结果 ， 它 本 身 还 有 其 用 处 ,: 
定理 令 u 是 对 一 切 t>0 都 有 定义 的 、(6.1) 的 一 个 有 界 解 ， 则 或 者 ult =0 对 一 切 t 
成 立 ; 或 者 u(t) 二 e* 对 茶 个 常数 入 成立， 
证 显然 
ula) =w (+a). (6. 2) 
首先 假定 对 某 个 值 < 有 zx(a) 王 0， 用 归纳 法 由 (6.2) 可 得 x (2a) =0 对 一 切 整 数 nn 成立， 
而 从 (6.1) sy 5h xs 一 0 ZT uC) =0 对 一 切 cs Mar. 因此 ula) =0 AAT u HS F 0. 


显然 (6.2) HRT uA fe. PROGR PRI (6. 1D 的 严格 正 的 解 . 
今 e :二 ww(1) 和 v= Aula. Ml 


vaits)=v1) v(s), H u1) —1. (6.3) 
RIER XAI v (1) =1 对 一 切 上 上 成立， BR. WERDER M min, A 
v= (+)= F0], (6.4) 
n n 


从 而 对 一 切 有 理 数 *， 有 v(s) 二 1， 进 一 步 地 ， 如 果 vla)=c, Meu (na) =e 对 任 一 正 整数 或 
MER n 都 成 立 . BEEN., WMR u REDEA, MWA CEREK. B&E, X i 十 ;一 
rH (6.1) ASL v (r—s) =v EE A E s Bos 因此 ， 如 采 u EAr RBA. AZ, 
不 管 多 么 小 的 区 间 ， 在 其 中 某 一 点 会 取 值 A， 因 此 ,在 任何 给 定 的 区 间 的 有 界 性 排除 了 
取 任 何不 等 于 1 的 值 的 可 能 性 . > 


17.7 等 待 队 列 与 服务 问题 


Ca) 最 简单 的 占线 问题 .假设 有 无 穷 多 条 线路 或 通道 可 供 使 用 ， 而 且 会 话 在 区 间 
(t,t 十 h) 内 结束 的 概率 为 yh toh) 〈 指 数 持续 时 间 . ) 输入 流 是 具有 参数 4 的 泊 松 
型 输入 流 。， 当 恰 有 7n 条 线 忙碌 时 ， 称 系统 处 于 状态 EE,. 

当然 ， 还 假定 各 个 会 话 的 持续 时 间 是 相互 独立 的 ,假如 有 n 条 线路 忙碌 ， 在 时 
间 刻 内 它们 之 中 有 一 条 空闲 下 来 的 概率 为 nuh 十 oC(h)， 在 此 时 段 内 有 两 个 或 两 个 以 上 
的 会 话 结束 的 概率 的 大 小 与 P 同 阶 ， 从 而 可 以 略 去 .一 个 新 的 呼叫 到 来 的 概率 是 Ah 
十 olh)， 在 此 时 段 来 到 几 个 呼叫 或 者 来 到 一 个 呼叫 又 有 一 个 会 话 结 束 ， 此 类 组 合 的 
概率 都 是 oC(h)， 因 此 ， 用 第 5 节 的 符号 有 : 

Àn 一人， p= nm. (7.1) 


1. (6.1) 仅仅 是 著名 的 哈 梅 尔 (Hamel) 方程 f(t 十 8) 二 fOr fo WARN BI. 我们 证 明 它 的 解 
或 者 形 如 at 或 者 在 每 个 区 间 内 都 是 无 界 的 . (众所周知 ， 没 有 一 个 这 样 的 解 是 贝尔 (Baire) BR, 
即 是 没有 一 个 这 样 的 解 能 由 级 数 展开 而 得 到 ， 或 者 从 连续 函数 出 发 通过 其 他 极限 过 程 来 得 到 . ) 

2. 见 [121]. 电话 交换 机 的 等 待 与 占线 问题 ， 早 在 随机 过 程 论 以 前 就 进行 了 研究 ， 并 刺激 过 理论 的 发 
Fe. 特别 是 帕 姆 (C. Palm) 多 年 来 被 证 明 是 有 用 旦 影响 深远 的 工作 ， 此 领域 最 早 的 工作 者 是 埃 尔 朗 
(A. K. Erlang) (1878—1929). SL [122]. 共有 独立 价值 的 开拓 性 的 工作 由 弗 赖 伊 (T. C Fry) 完 
成 ， 见 [123].， 此 书 为 概率 论 在 工程 应 用 中 的 发 展 做 了 许多 工作 . 
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基本 微分 方程 式 组 〈5. 2) 一 (5. 3) 取 下 述 形式 ， 

PoE S= AP, (1) +uP i), 

POS Anu) P,O HAP na Ont) uP a) (n1). 
AA 8 ET LA E HEE BY EE ei BO a ek Od ABR AS BE A A 15). RTL A E 
(5.5) 中 的 量 p, =limP, O. Ee ATR: 


(7. 2) 


APo = LP 1» 
(A+) Pr=AP pr nt 1) pei- (T. 3) 
用 归纳 法 可 得 p5 po A/pw"/nt, PEA 
p= rte (7. 4) 


故 其 极限 分 布 是 具有 参数 4X/ 的 泊 松 分 布 ， 它 与 初始 状态 无 关 . 
容易 求 出 均值 Mi) =DnP, (1)， 在 (7.2) 的 第 ”个 方程 式 中 乘 以 再 相 加 ， 并 注意 
P.O ZAA I, 可 得 : 


M O= Mt). (7.5) 
当初 始 状 态 为 E; 时 ， 有 MOS=i, Am 
Mo = em bie, (7.6) 


读者 可 验证 当 i 二 0 的 特殊 情形 ，P; (2) 精确 地 由 具有 均值 MORNARA AE Bra h. 

(b) 有 限 条 通道 的 等 待 队列 .! 现在 把 上 面 的 例子 修正 到 更 加 符合 实际 的 模型 。 除 
了 线路 或 者 通道 的 数目 为 有 限 以 外 ， 其 他 假设 照旧 ， 如 果 所 有 的 通道 都 是 忙碌 的 ， 
则 新 来 的 呼叫 加 入 等 待 队 列 一 直 等 到 有 一 条 通道 空 用 .这 意味 着 所 有 的 线路 具有 同 
一 条 公共 的 等 竺 队列. 

“线路 ”一 词 可 以 用 邮局 的 服务 台 来 代替 ， 而 “会 话 ” 可 以 用 “服务 ”来 代替 ， 
实际 上 ， 我 们 所 讨论 的 是 : 所 有 的 a 条 线路 都 忙碌 时 ， 一 个 新 到 的 人 才 和 需要 等 行 的 
一 般 的 等 竺 队列 问题 . 

如 果 正 在 被 服务 与 在 等 待 队 列 上 的 人 数 之 和 恰 为 n 个， 则 说 系统 处 于 状态 上 上, 
只 有 当 na 时 ， 这 种 等 待 队列 才 存 在 ， 而 且 此 时 恰 有 ”一 a 个 人 在 等 每 队列 中 . 

只 要 有 一 条 通道 空闲 ， 情 况 就 和 前 面 的 例子 完全 一 样 . 然而 ， 如 果 系 统 处 于 状态 
E., m n>a, WMA a AREH P, A. nee BA Hau. Alt, BRD 
方程 式 组 对 n<a BYR (7.2) 所 给 出 ， 而 对 na, WE RT A A h : 

已 (人 一 一 (十 ap 局 A) HAP i O + auP,1 C). (7.7) 
对 只 有 一 个 通道 的 特殊 情形 (a 二 1)， 这 些 方 程式 化 为 系数 不 依赖 n 的 关于 生火 过 程 
的 那些 方程 式 . 
当 nca 时 ， 极 限 p= limP, OWE 7.3 式 ， 而 当 nn 之 a 时， 它们 满足 ; 
(Atau) Pa SAP n- Taupa (7.8) 


1. [124]. HKR. BBW O—8 相 20. 
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由 递 推 法 可 得 
Pa Po Bi (na), (7. 9) 
Pn — Po ae (n>a). (7.10) 
RAH 
A/ 1a. (7. 11> 


F, RRE C/D AAS Ak, 4 Aau tt, WRR p 不 存在 、 在 这 种 情形 
F, p,=0 xs —-bn Rk, RERA: 等 待 队列 的 长 度 逐 渐 地 无 限 增 大 .， 另 一 方面 ， 
如 果 (7.11) 成 立 ， 我 们 可 以 从 之 六 三 1 来 决定 pp， 由 P, (2) 的 精确 表达 式 可 以 证 
HH: p, 确实 代表 了 P, (2) 的 极限 分 布 ， 表 17- 1 A T a=3,A/p=2 的 一 个 数值 例 子 . 

(c) 机 器 维修 .' 为 了 先 熟 悉 ， 我 们 从 最 简单 的 情形 出 发 ， 而 在 下 一 个 例子 中 再 一 
般 化 .问题 如 下 . 

我 们 考虑 一 批 在 正常 情况 下 不 需 人 看 管 的 自动 机 器 ， 只 有 当 机 器 出 毛病 时 才 要 
求 维修 ， 而 要 求 维修 的 时 间 是 一 个 服从 指数 分 布 的 随机 变量 . 换 句 话说 ， 机 化 是 由 
满足 下 述 性 质 的 两 个 常数 A 和 jw 来 作 特征 的 ， 如 果 在 时 刻 t 机 器 处 于 工作 状态 ， 则 它 
在 时 刻 t 十 h 以 前 需要 维修 的 概率 为 Ah 加 一 项 当 h->0 时 可 忽略 的 项 ， 反 之 ， 当 机 符 正 
在 被 维修 时 ， 其 维修 时 间 在 t 十 h 之 前 结束 并 转 人 工作 状态 的 概率 为 yh 十 oth)， 对 一 全 
效率 高 的 机 器 来 说 ， 和 应 该 相对 地 较 小 而 pe 则 相对 地 较 大 .， 称 比值 MXw 为 维修 因子 . 

假定 m 台 机 器 具有 相同 的 参数 A 和 jv， 而 且 它 们 的 工作 是 相互 独立 的 ， 维 修 工 又 
是 一 个 人 ， 当 某 台 机 器 出 现 毛病 时 ， 如 果 维 修 工 没有 为 其 他 机 响 进 行 维 修 ， 则 它 立 
刻 得 到 维修 ， 否 则 这 台 出 毛病 的 机 器 进入 等 待 维修 队列 ， 如 果 有 nn 台 机 器 不 能 工作 ， 
Ma ABA TRAE, l<n<m 意味 着 有 一 台 机 器 正在 被 维修 ， 而 有 2 一 1 台 机 化 在 
等 待 维修 ， 如 果 系 统 处 于 状态 E,， 则 所 有 的 机 器 都 在 正常 工作 ， 而 维修 工 在 内 看 . 


表 17-1 当 通 道 数 a=3 H 4/4 二 2 时 的 极限 概率 


n Q 1 2 3 4 D 6 7 
占线 数 0 1 2 3 3 3 3 3 
等 待人 数 0 0 0 0 1 2 3 4 
Pn 0. 1111 0.2222 0.2222 0.1481 0.09888 0.0658 0.0439 0. 0293 


转移 E >E, 1 是 由 mm 一 n 台 工 作 着 的 机 器 中 有 一 台 出 现 毛 病 而 引起 的 ， 而 转移 
E,>E, ,在 维修 的 机 器 修好 和 且 返 回 工作 状态 时 发 生 . 因此 ， 得 到 了 一 个 具有 下 述 系 

数 的 生 灭 过 程 : 
à= (mn), 二 0， pa T pe 5 FH Un T p (7.12) 


LA O 和 (d) 以 及 数值 例子 ， 都 取 自 文献 【125]， 最 经 济 的 修理 工 的 数目 与 图 表 是 由 由 姆 给 
出 的 . 


La 
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对 1 委 ” 委 mm 一 1， 基 本 微分 方程 式 组 (5.2) BH 
P,(D)=—{m—mAtp}P, tm—nt+ D AP O+uP 1), (7.13) 
MARAS n=0 和 n= 二 mwm， 有 
P’,(t) =—mAP, (1) + uP (2), (7. 13a) 
P’,, (2) = —pP,, 2) HAP n @). 
这 是 一 个 有 限 的 微分 方程 式 组 ， 可 以 用 标准 方法 求解 .极限 p, =limP,, (2) RIA 
式 组 决定 : 


MA Poppi» 
{((m—n) At ud p, = mnt1)Ap 1 pup.1, 
LP mn FAP m-i. | 
(7. 14) 
由 这 些 方程 式 ， 我 们 得 到 下 列 违 推 公 式 
(m—M Ap, = uP ntn. (7.15) 


依次 以 n=m l, M—Ls aa) l, OFLA, 得 : 


而 剩 下 的 未 知 常数 pn 可 以 以 诸 p; 之 和 为 1 而 求 出 . 下 面 的 结果 是 熟知 的 埃 尔 朗 损 失 


公式 : 
人 1 /Ai 
pa= (itz, (4) pepo (2) ) (7. 16) 
# 17-2 中 给 出 了 典型 数值 . 
表 17-2 埃 尔 朗 损 失 公 式 对 4/4 二 0.1，m==6 时 的 概率 Pu 


n 等 竺 维修 的 机 器 数 Pr 

0 0 0. 4845 
] 0 0. 2907 
2 1 0. 1454 
3 2 0. 0582 
4 3 0. 0175 
5 4 0. 0035 
6 Ə 0. 0003 


概率 p 可 解释 为 维修 工 空闲 的 概率 EK 17-2 的 例子 中 ， 他 会 有 约 一 半 的 时 间 
空闲 着 )， 在 等 待 队 列 上 待 修 的 机 器 数 的 期 望 为 : 
w= : (k—1) p; = SI kp (1— po). (7.17) 
此 数 可 把 (7.15》 对 n==0,1,…m 求 和 而 算出 ， 应 用 诸 p, 之 和 为 1 可 得 : 
mM—Aw—A(l—po)=u(1— po) 
或 者 
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-十 
wm (1—po). (7.18) 


在 表 17-2 的 例子 中 ， 我 们 有 w=6 + (0.0549). 因此 ，0. 0549 是 一 台 机 器 对 等 待 队 
列 的 平均 贡献 . 

(d) 续 上 例 ， 多 个 维修 工 的 情形 ， 除 了 把 一 个 维修 工 改 为 r+ 个 <m) 维修 工 为 
m 台 机 器 服务 以 外 ， 上 例 中 的 其 他 基本 假设 均 不 改变 ， 因此， 对 nn 三 r+， 状态 E, 意味 
着 : r 一 n 个 维修 工 闲 着 有 nn 台 机 器 正在 被 维修 ， 没 有 机 器 在 等 待 队列 上 待 修 ， 对 于 n 
>r, AS E, 意味 着 : r 台 机 器 正 在 被 维修 ， 还 有 n—r 台 机 器 在 等 待 队 列 上 待 修 . 
RT (7.12) 显然 要 用 


Ap =A » to =O, 
An= mA, pn = Nw 1<nxXr), (7. 19) 
A, 一 《7 一 nis Hn — ra (rnm). 


代 鹤 以 外 ， 上 一 个 例子 的 方法 仍然 可 以 运用 . 我 们 不 再 写 出 基本 的 微分 方程 式 组 ， 
而 只 与 出 有 关 极 限 概率 p, 的 方程 式 组 ， 对 于 l<n<cr A: 
( (mnài tnu) p, = Cnn Apart nt lp agi (7. 20a) 
而 对 ran=m, A | 
{nnà trut p, = (mont Ap i TP ar. (7. 20b) 
Xi n=0, BA mp =p... HMKARKRE T p/p. H (7.20a) 用 归纳 法 得 知 ， 当 
?<<r 时 有 


(nt Dupri = nn) Ap,, (7.21) 
最 后 ， 当 x 字 > 时 ， 由 7. 20b) 有 
rip a1 —=(m—n)ap,. (7, 22) 


这 些 方程 式 能 使 我 依次 算出 比值 p,/p。 Bla» po TAARIA p= RKE. 表 17-3 
中 的 值 就 是 由 这 种 方法 得 到 的 . 


表 17-3 4 A/p=0.1,m=20,r=3 时 的 概率 pn 


n BERIL EERIE ” 闲 着 的 维修 工 数 Pr 

0 0 0 3 0. 13625 
1 j 0 2 0. 27250 
2 2 0 1 0. 25888 
3 3 0 0 0. 15533 
4 3 1 0 0. 08802 
5 3 2 0 0. 04694 
6 3 3 0 0. 02347 
7 3 4 0 0. 01095 
8 3 5 0 0. 00475 
9 3 6 0 0. 00190 
10 3 7 0 0. 00070 
11 3 8 0 0. 00023 
12 3 9 0 0. 00007 
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比较 表 17-2 和 表 17-3， 可 发 现 一 些 怀 人 的 事实 ， 它 们 参照 的 是 同一 种 类 型 的 机 
器 (Ap=0.1)， 但 是 在 第 二 种 情况 下 ， 机 器 数 m 一 20， 维 修 工 数目 r 王 3， 每 个 维修 
工 负责 维修 的 机 器 数 由 6 上 升 到 6 入， 但 机 器 却 得 到 更 有 效 的 维修 ， 
定义 机 器 的 损失 系数 如 下 : 


w _ 机 器 在 等 待 队列 十 的 平均 数 (7. 23) 
m ILAS AL 
而 定义 维修 工 的 损失 系数 为 : 
p _ 空闲 的 维修 工 的 平均 数 (7. 24) 
r 维修 数 l 


为 了 实用 的 目的 ， 我 们 可 以 把 概率 P, (1) 与 极限 p, 视 为 等 同 ， 在 表 17-3 P, w= p 
十 2p, 十 3ps 十 … 十 17po， 而 p= 3p 2p tp: K 17-4 明确 地 证 明了 对 于 上 述 特 定 
的 (A/u=0.1) 机 器 ， 每 20 台 机 器 配 3 个 维修 工 比 每 6 台 机 器 配 一 个 维修 工 更 经 济 . 
表 17-4 Bil (c) 与 (da) 中 所 讨论 的 两 种 维修 制 的 效率 的 比较 
Ce) (d) 


ELARA 6 20 
维修 工 数 1 3 
每 个 维修 工 负 责 的 机 器 数 6 6 -5 
维修 工 的 损失 系数 0. 4845 0. 4042 
机 器 的 损失 系数 0. 0549 0.01694 


(e) 电 力 供应 问题 .中 一 条 电线 供应 a 个 电焊 工 ， 这 些 电 焊工 只 是 间断 地 使 用 电 . 
如 果 在 时 刻 :， 一 个 电焊 工 正在 使 用 电 ， 那 么 他 在 时 刻 t 十 h 以 前 停止 使 用 的 概率 为 
uh 十 obh); 如 果 在 时 刻 :， 他 没有 要 求 使 用 电 ， 那 么 他 在 tth 以 前 要 求 使 用 的 概 认 为 
轴 十 o(h)， 电 焊工 们 的 工作 是 相互 独立 的 ， 
如 果 恰 有 nn 个 电焊 工 正在 使 用 电 ， 则 说 系统 处 于 状态 E,. 因 此， 系统 只 有 有 限 
个 状态 Ey, tty Ea 
如 果 系 统 处 于 状态 E,， 则 恰 有 a 一 n 个 电焊 工 没 有 用 电 ， 而 且 在 长 为 h 的 时 间 区 
间 内 有 一 个 新 的 要 求 用 电 的 概率 为 (a 一 7) 胃 十 o(h); 另 一 方面 ,7 个 用 电 的 电焊 工 有 
一 个 停止 用 电 的 概率 为 nh 十 oC(h)， 所 以 ,我们 得 到 了 一 个 具有 下 列 系 数 的 生 炎 
过 程 : 
A= CaS nÀ, =n = OS na. (7. 25) 
基本 微分 方程 式 组 为 : 
P’,(t)=—aaP,(t) + pP C), 
Po) =— mt larma P, OOt at DuP OT Carat DAP p C), 
P!.(t)=—auP,@)+AP.-;@). 
(7. 26) 
(此 处 l<n<a—-1.) 容易 验证 极限 概率 由 下 述 二 项 分 布 所 给 出 : 
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a= GE) (7. 27) 


此 结果 直观 上 也 可 预料 到 .(P, (2) 的 精确 表达 式 由 习题 17 给 出 .) 


17.8 倒退 (向 后 ) 方程 


在 前 述 诸 节 中 ， 我 们 研究 了 在 时 刻 t 系统 处 于 状态 EE, BRP). 此 记号 虽 方 
便 ， 但 它 没有 涉及 系统 在 时 刻 0 的 初始 状态 E;， 所 以 容易 引起 混乱 .为 了 进一步 的 
理论 研究 ， 最 好 返回 来 用 第 1 节 曾 用 过 的 转移 概率 的 符号 ， 因 此 ， 用 Pa ORRE 
Zj s 系统 处 于 状态 E; 的 条 件 下 ， 系 统 在 时 刻 s 十 t 处 于 状态 下 , 的 (和 条件) 概率， 我 们 
继续 用 P,(t) 代 表 系统 在 时 刻 上 处 于 状态 五 , 的 〈 绝 对 ) 概率， 当初 始 状 态 E 给 定 以 
后 ， 绝 对 概率 P, (t) 与 P, (1) 一 致 ， 但 是 ， 当 初始 状态 按 概率 分 布 (a;) 而 选取 
时 ， 则 
P,()= >) a.P,,(). (8. 1) 


对 以 前 所 考虑 的 特殊 过 程 ， 我 们 已 经 证 明 : 对 固定 的 i，P; (1) 满 足 基本 微分 方程 式 
组 (3.2) 和 (5.2). 下 标 i 只 出 现在 初始 条 件 中 ， 即 
P ol Sth (8. 2) 
0 否则 . 
作为 研究 更 一 般 的 过 程 的 准备 ， 我 们 着 手 证 这 组 相同 的 转移 概率 满足 第 二 微分 
方程 式 组 ， 为 固定 起 见 ， 以 第 3 节 中 研究 过 的 纯 生 过 程 开 始 . 微分 方程 式 组 是 用 下 
述 方 法 导出 的 ; 把 时 间 区 间 由 (0.2) 延长 到 〈0,z 十 六) 并 考虑 其 在 短 区 间 (t,t +h) 
内 的 改变 ， 我 们 也 可 以 将 区 间 00.0 沿 过 去 的 方向 延长 并 考虑 其 在 《一 六 ,0) 内 的 改 
变 ， 用 这 种 方法 ， 我 们 得 到 一 个 新 的 微分 方程 式 组 ， 其 中 国定 的 是 2 NED. Hh 
实 ， 在 时 刻 一 h 处 于 状态 E; 到 时 刻 上 处 于 状态 的 EE 的 转移 有 3 种 互 斥 的 方式 发 生 : 
(1) 在 一 h 到 0 之 间 没 有 跳跃 发 生 ， 而 系统 由 时 刻 0 处 于 aE, (2) 在 一 h 到 0 
之 间 恰 有 一 次 跳跃 发 生 ， 而 系统 由 时 刻 0 处 于 状态 Ei 在 时 刻 1 转 到 EE,; G) 在 
一 h 到 0 之 间 有 多 于 一 次 跳跃 发 生 ， 对 应 于 第 1 种 情况 的 概率 是 1 一 4 六 十 oth); 第 2 
种 情况 的 概率 是 AA +o Ch); 而 第 3 种 情况 的 概率 o(h)， 如 像 第 2 TASB 3 H 


样 ， 有 
P (t+h)=P, D A AAh) t Pi DAA TOCA), (8. 3) 
因此 ， 对 ; 闻 0， 新 的 基本 微分 方程 式 组 是 
PD = AAP a HAP iin E). (8. 4) 


称 这 组 方程 式 为 倒退 方程 式 组 ， 为 区 别 起 见 ， 称 方程 式 组 3.2) 为 前 进 方程 式 组 . 
初始 条 件 是 (8. 2). LEWE, ATHE 

P,()=0, 4n<i, (8. 5) 
但 病态 的 例外 是 存在 的 ， 见 第 9 节 例 Cb). ] 
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在 生 灭 过 程 的 情形 ， 基 本 的 前 进 方 程式 组 〈 国 定 是 (5.2) 一 (5.3)， 导 出 
(8.4) 的 类 似 推 理 可 以 导出 对 应 的 倒退 方程 式 组 : 

P'a (O5 Ai tHe) Pa (O AP itin @ HP Hin ®@. (8. 6) 

显然 ， 前 进 方程 式 组 与 倒退 方程 式 组 不 是 彼此 相互 独立 的 .满足 初始 条 件 
(8.2) 的 倒退 方程 式 组 的 解 ， 只 要 惟一 ， 就 一 定 满足 前 进 方程 式 组 . 

Gl ” 泊 松 过 程 ， 在 第 2 节 中 ， 我 们 曾经 把 (2. 4) 的 泊 松 表示 式 解 释 为 : 在 任 一 
长 为 上 的 时 间 区 间 内 恰 有 次 呼叫 到 来 的 概率 ， 如 果 在 0 到 :的 时 间 区 间 恰 有 个 呼 
叫 到 来 ， 则 说 系统 在 时 刻 t 处 于 状态 EE,， 在 时 刻 处 于 状态 i 而 到 时 刻 妃 转 到 状态 
E, 意味 着 : Æi 到 之 间 来 到 了 7 一 i 个 呼叫 。 这 种 情形 只 有 当 nn 之 i 才 有 可 能 ， 因 
此 ， 对 泊 松 过 程 ， 其 转移 概率 为 : 

(ar)" 


P,(t)=e”-» =p? 当 ni, (8.7) 
P,()=0; 当 ni, 
它们 满足 前 进 方程 式 组 ， 
P’,, = AP a O HAP 5-1 @ (8. 8) 
和 倒退 方程 式 组 ， 
P a O= AP nO taP pin A). (8. 9) 
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前 面 所 讨论 的 只 限于 这 样 一 些 过 程 : 它 从 状态 E, 出 发 只 能 直接 转移 到 邻近 的 状 
态 E,ii 或 E 1， 此 外 ， 这 些 过 程 还 是 时 齐 的 ， 即 是 说 ， 转 移 概 率 P(t) 对 一 切 长 为 
; 的 时 间 区 间 来 说 ， 都 是 一 样 的 .现在 我 们 考虑 更 一 般 的 过 程 ， 对 它们 来 说 ， 上 述 两 
个 假设 均 不 要 . 

正如 一 般 的 马尔 可 夫 链 的 理论 一 样 ， 人 允许 从 任意 一 个 状态 E 直接 转移 到 任意 一 
个 另外 的 状态 五 ,， 而 且 转 移 概 率 允 许 随 时 间 而 变化 .这 就 必须 特别 指明 时 间 区 则 的 
两 个 端点 而 不 仅仅 是 它 的 长 度 ， 因 此 ， 把 给 定 前 面 的 时 刻 处 于 状态 巨 ; 的 条 件 下 在 
时 刻 t 系统 处 于 状态 万, 的 条 件 概 率 写 作 P; (t,t)， 除 了 rt 以 外 ， 符 号 Pa DER 
有 意义 的 ， 如 果 过 程 是 时 齐 的 ， 则 P;, (zt, 四 只 依赖 于 差 :一 rc， 从 而 可 以 把 Pa (r,t 二 2) 
( 它 不 依赖 于 o WR Pa). 

在 第 1 节 中 ， 我 们 曾经 看 到 : 时 齐 的 马尔 可 夫 过 程 满足 查 首 曼 - 科 尔 莫 及 罗 夫 方 
程式 : 

Pa (s+t)= >) PaO) Pan). (9. la) 

对 非 时 齐 的 过 程 ， 类 似 的 恒等式 是 
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Pa (r,t)= >) Pi) Pin (5st) (9. 1b) 


对 r<s<e 成 立 ， 此 关系 式 说 明 下 述 事实 : 从 时 刻 = 处 于 状态 瓦 , 到 时 刻 t 转移 到 状态 
E,， 在 中 间 时 刻 s 处 于 某 个 状态 EE,， 而 且 对 马尔 可 夫 过 程 来 说 ， 从 EE, 转移 到 EF, 的 
概率 P,(s,t) 不 依赖 前 面 的 状态 E.， 因 此 ， 可 数 状态 的 马尔 可 夫 过 程 的 转移 概率 是 
满足 下 列 边界 条 件 

Pa (rt) 20, > Pa lrt) 5l, (9.2) 


Wee a -BLR ERR BP RAR (9. 1b) 的 解 . 我 们 将 不 加 证 明 地 承认 下 列 事实 ， 
反之 ， 这 样 的 解 代 表 了 一 个 马尔 可 夫 过 程 的 转移 概率 . 由 此 推出 马尔 可 夫 过 程 理论 
的 基本 问题 是 ; 找 出 满足 边界 条 件 (9.2) 的 查 普 曼 - 科 和 尔 葛 戈 罗 夫 方 程式 的 全 
部 解 . 

”本 节 的 主要 目的 是 说 明 ， 关于 生 灭 过 程 的 假设 可 以 自然 地 推广 到 允许 ESE, 的 
任意 的 直接 转移 ， 从 这 些 假设 出 发 ， 我 们 将 推出 两 组 分 别称 为 前 进 方程 式 组 和 倒退 
方程 式 组 的 常 微分 方程 式 组 ， 在 通常 的 情况 下 ， 这 两 组 方程 式 的 每 一 组 都 惟一 地 决 
定 一 组 转移 概率 ， 前 进 方程 式 组 概率 上 较为 自然 ， 但是， 它们 的 严格 推导 要 求 较 强 
而 且 直 观 意 义 并 不 鲜明 的 假设 . 

在 第 5 节 的 时 齐 的 生 灭 过 程 中 ,起 始 的 假设 是 涉及 转移 概率 Pp (4) 对 小 有 的 性 
质 ， 本 质 上 ， 它 要 求 导数 P ,在 原点 存在 . 对 于 非 时 齐 的 过 程 ， 我 们 也 将 加 同样 的 条 
件 在 作为 z 的 函数 的 Pj (t,t 十 x) 上 . 其 导数 具有 类 似 的 概率 解释 ,但 它们 是 1 的 
PKI aX. 

假设 1 对 每 个 状态 EE,， 存 在 一 个 对 应 的 连续 函数 c，(t) 20, RBA O 
时 有 : 


fm ho (0). (9, 3) 


假设 2 对 每 一 对 状态 EE, (KR, AERE paa) 〈 依 赖 时 间 ) 使 得 当 
h> On F : 


Pa ETR DpalD), GEB: (9.4) 


其 中 p(t) 是 1 的 连续 函数 ,而 且 对 任意 的 固定 的 + 和 j， 有 


1. 马尔 可 夫 过 程 的 概念 要 求 ， 在 时 刻 s AERE E,， 时 刻 ;以 前 的 发 展 不 影响 将 来 的 发 展 ， 如 第 1 
节 中 所 指出 的 ， 查 普 曼 - 科 尔 莫 戈 罗 夫 方程 式 只 是 部 分 地 表达 了 这 一 要 求 ， 因 为 它 仅 仅 包 仿 了 一 
个 时 刻 rs 和 另 一 个 时 刻 :>s， 是 否 存在 非 马尔 可 夫 过 程 的 转移 概率 也 满足 (93.1) 这 一 长 期 大 
注 的 问题 ， 现 在 已 经 得 到 解决 ， 回 答 是 肯定 的 .有 已 知 的 这 种 过 程 的 最 简单 的 例子 是 时 齐 的 仅 有 
三 个 状态 E 的 过 程 . [参见 [127]. 这 种 过 程 是 比较 病态 的 ， 但 是 它们 的 存在 性 ， 与 下 述 论断 并 
RFS: 每 一 个 满足 (9. 2) 的 查 普 曼 - 科 尔 莫 戈 罗 夫 方程 式 的 解 对 应 着 〈 在 某 种 惟一 的 意义 下 ) 
一 个 马尔 可 夫 过 程 . | 


N pp(D=1, p=. (9.5) 
k 


(9.3) 的 概率 解释 是 明显 的 ， 假 设 在 时 刻 t 系统 处 于 状态 EE,， 在 1 到 1 十 h 之 间 
没有 发 生 改变 的 概率 为 c, (1)h 十 oth)， 系 数 pj (1) 可 解释 为 如 下 的 条 件 概 率 ， 如 果 从 
E, 出 发 在 上 与 1 十 h 之 间 发 生 一 次 改变 ， 此 改变 使 系统 从 E 转移 到 EE， 在 生 灭 过 程 
H, Ca CE) S Àn F ns 

Pijl o= i , Pij- £) “Uta ’ (9.6) 
而 对 其 他 的 7 MRNAS, pp (1) 二 0。 对 每 一 个 固定 的 1, pi (?) 可 以 解释 为 一 个 马尔 
可 夫 链 的 转移 概率 . 

上 述 两 个 假设 足以 保证 推出 Py (t,t) 的 倒退 方程 式 组 ， 但 是 ， 对 前 进 方程 式 组 ， 
还 要 下 面 的 附加 假设 . 

假设 3 对 于 固定 的 k&，(9.4) 中 的 极限 对 7 而 言 一 致 成 立 . 

此 假设 的 必要 性 ， 在 理论 上 是 很 有 意义 的 ， 现 讨论 如 下 . 

我 们 视 Pa (r,t) 为 + Mk 的 基数 来 排 寻 微分 方程 式 组 (AEA FEAH). H (9.1) 
有 

Pa rytth)= >) Py (DP, t,tth). (9.7) 


把 上 式 右 边 的 Pa (t,t 十 h) 这 一 项 用 (9. 3) 表示 可 得 : 
P, (r,tih)— P, (r,t) 
h 


=—¢,(t) Px (r,t) Th” >, P; Crt) Pjs Gstth) t (9. 8) 


此 处 略 去 的 项 随 h 趋 于 0 而 趋 于 0， 而 和 号 是 对 一 切 不 等 于 的 j 来 求 和 ， 现 在 把 (9.4) 
用 于 和 号 中 的 诸 项 ， 因 为 根据 假设 3) 极限 对 ; 一致 成 立 ， 所 以 右边 当 思 趋 于 0 时 极限 
存在 ， 因 此 ， 左 边 的 极限 也 存在 ， 这 意味 着 Pi (ry) 关于 1 的 偏 导数 存在 ， 而 且 


Fo) Py (est) + >, P; Crt) A) Pj G). (9. 9) 


这 是 基本 的 前 进 微 分 方程 式 组 ， 此 处 i 和 +r 是 固定 的 ， 所 以 我 们 得 到 了 〈 不 计 形 式 上 
的 偏 导数 的 形状 ) 一 组 关于 Pa (r,t) 的 常 微分 方程 式 ,'! BM i Ae 仪 在 初始 条 件 中 
tH EL | 
1, 4 k=i, 

Py, (n= 0， 否则 |. : (9. 10) 

现在 转 而 讨论 倒退 方程 式 组 ， 在 这 些 方程 式 中 ,，& 和 上 上 保持 为 常数 ， 所 以 转移 概 
率 P,, (r,t) 可 以 考虑 为 初始 数据 E Mr 的 函数 .在 起 始 的 假设 的 陈述 中 ， 初 始 变 量 
保持 固定 ， 但 是 ， 为 了 推导 倒退 方程 式 组 ， 把 同样 的 条 件 参 照 时 间 区 则 (i 一 h，2) 


1. 标准 形式 是 : rO =a DaD S OGO pr A). 
j 
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来 表述 更 为 方便 ， 换 名 话说 ， 从 下 面 的 条 件 (9.3) 和 (9.4) 的 另外 一 种 形式 出 发 
更 为 目 然 : 


1— ns 
EnD e e (9. 3a) 


OOTO, GÆR). (9. 4a) 
不 难 证 明 这 两 组 条 件 是 等 价 的 〈 或 者 把 它们 表述 成 一 致 的 形式 )， 但 我 们 将 从 这 后 一 
种 形式 出 发 ， 下面 的 推导 中 值得 注意 的 是 ， 不 需要 类 似 于 假设 3 的 条 件 . 

由 查 普 曼 - 科 和 尔 莫 戈 罗 夫 方程 式 (9. 1b) 有 


Py Cr—h,t)= >) Pi(r—h,r) Pa (r,t), (9. 11) 


对 7 一 :时 用 (9. 3a) 得 : 
P., (tr—h,t)— P, (r,t) 
h 
=—c¢(r)Py(rt)th” >) Pi Cr—h,r) Palette. (9. 12) 


ikk AP; (ch, t) >c; (rT) Pa (r), THA (9.12) 的 右边 的 和 中 的 极限 总 是 一 
致 收敛 的 .事实 上 ， 当 N>i 时 总 有 
OKAT! > Pa (tr—h,r) Pu (r,t) Sh >» Pa (rt—h,7) 


v= N+] 


=n h4 > Pu(r 一 Pr) } cn (4 — > Pa), (9. 13) 


由 条 件 (9.5), 只 要 选取 N 充分 大 ， 可 使 上 式 任意 小 . 由 此 推出 ， Æ (9.12) 中 逐 
项 取 极 限 是 允许 的 ， 从 而 得 : 
(Pa Crt) =c; Ce) S) pa Pu tst). (9. 14) 
这 就 是 基本 的 倒退 微分 方程 式 组 ， 此 处 出 现 的 & 和 上 都 是 固定 的 参数 ， 所 以 
(9.14) 实质 上 是 一 组 常 微 分 方程 式 ， 参 数 上 和 上 + 只 出 现在 下 述 初 始 条 件 中 : 
O l, 4i=k, 
P, Ctt) = 0， Z. (9. 15) 
例 〈a) 广 义 泊 松 过 程 ， 考虑 所 有 的 cj (ti) 等 于 同一 常 放 入 和 pi 不 依赖 1 的 情 
形 ， 在 这 种 情况 下 ，p, 是 通常 的 马尔 可 夫 链 的 转移 概率 ， 我 们 用 pe 〈 如 第 15 章 一 
样 ) 表示 其 高 阶 转移 概率 . 
由 于 c (=A, PRUE Kl (2,t 十 h)〉 内 发 生 一 次 转移 的 概率 不 依赖 于 系统 
在 时 刻 1 所 处 的 状态 ， 且 等 于 Atoh). KAMT E rae 之 间 发 生 的 转移 的 次 数 服 
从 参数 为 A( 一 忆 的 泊 松 分 布 ， 已 知 恰 有 次 转移 发 生 的 条 件 下 ， 从 了 转移 到 的 
(条 件 ) 概率 为 pr. TAME 


Pa (rd) =e ro D) EEA pep (9. 16) 
n=0 . 
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WAPI ARE, pO =l, pP=0, 4j~k). BRAWL: 事实 上 (9.16 是 满足 
边界 条 件 的 两 个 微分 方程 式 组 09.9) 和 (9.14) 的 解 ， 
特别 地 ， 若 
pi =0 CHR), pi = fr_;( 当 kj), (9.17) 
则 (9.16) 化 为 第 12.2 节 的 复合 泊 … 松 分 布 . > 
这 两 组 微分 方程 式 ， 首 先是 由 科 尔 莫 戈 罗 夫 在 其 关于 马尔 可 夫 过 程 的 偶 基 性 的 
重要 论文 623 中 推出 来 的 ， 而 当 系 数 c, (六 对 上 而 言 有 界 时 ， 费 勒 证 明了 : 这 两 个 方程 
式 组 存在 惟一 一 组 公共 解 {P, (ri}， 它 们 满足 查 普 曼 - 科 尔 莫 戈 罗 夫 方程 陈 
(9. 1b) 和 边界 条 件 (9. 2)， 进 一 步 地 ， 在 这 种 情况 下 ， 没 有 一 组 微分 方程 式 还 有 其 
他 的 解 ， 因 此 ， 本 质 上 看 ， 这 两 组 方程 式 是 等 价 的 然而， 一 些 具体 问题 中 寻 出 的 
方程 式 中 序列 {c, 是 无 界 的 ， 如 第 4 节 中 所 证 明 的 ， 在 这 种 情况 下 ， 我 们 有 时 碰 九 
一 些 意 想 不 到 的 解 ， 对 它们 而 言 ， 有 : 
>) Pi Cr DEI (9. 18) 


且 有 些 是 严格 不 等 式 ， 已 经 证 明了 ! [对 系数 c,(z) 不 加 任何 限制 ]， 存在 一 组 最 小 解 
{P(t,t)}， 它 满足 两 组 微分 方程 式 ， 而且 还 满足 查 普 曼 - 科 尔 莫 戈 罗 夫 方程 式 
(9. 1b) 和 (9. 18)， 此 解 称 为 最 小 的 ， 是 因为 ， 只 要 PaO) 满足 倒退 微分 方程 
式 组 或 前 进 微 分 方程 式 组 [同时 满足 常用 的 初始 条 件 (9. 10)]， 就 总 有 

Py (cst) Pi (tt). (9.19) 
当 最 小 解 对 一 切 满足 取 等 号 形式 的 〈9.18) 时 ， 则 除了 Par Usb, PBA 
组 和 前 进 方程 式 组 都 没有 任何 其 他 的 有 概率 意义 的 解 ， 换 名 话说 ， 当 最 小 解 不 征 个 
完全 的 时 ， 过 程 惟 一 地 被 两 组 方程 式 中 的 任何 一 组 所 决定 ， 如 前 所 述 ， 当 系数 列 《c 
HO) 对 每 个 固定 的 上 都 有 界 时 ， 就 是 如 此 . 

当 最 小 解 是 不 完全 的 时 ， 即 是 说 (9.18) 对 某 个 上 (从 而 对 全 部 O 取 不 等 式 的 
形式 时 ， 情 况 就 完全 不 同 了 ， 在 这 种 情况 下 ， 存 在 无 穷 多 组 转移 概率 满足 倒退 方程 
式 组 和 查 普 曼 - 科 尔 莫 戈 罗 夫 方程 式 ， 因 此 ， 存 在 无 穷 多 个 满足 倒退 方程 式 组 和 假 议 
(1) @ 的 马尔 可 夫 过 程 ， 其 中 有 一 些 满足 前 进 方程 式 组 ， 但 是 在 其 他 情况 下 ， 前 
进 方程 式 组 的 解 是 惟一 的 

例 〈b) 生 过 程 ， 对 时 齐 的 生 过 程 而 言 ， 微 分 方程 式 组 G.D 为 如 下 形式 : 


1. 参见 [129]， 这 篇 文章 处 理 了 较 一 般 的 状态 空间 ， 但 把 可 数 状态 空间 作为 最 重要 的 特殊 情况 来 讨 
论 ， 这 被 后 来 某 些 作者 忽略 了 ， 他 们 还 对 这 种 情况 给 出 了 更 复杂 又 不 完备 的 推导 ， 时 齐 情形 的 最 小 
解 在 第 二 卷 书 第 14. 7 节 中 用 拉 普 拉 斯 变换 推出 来 了 ， 对 于 更 完整 的 处 理 ， 请 参见 [130]. 

2. 回顾 一 下 ， 只 有 假设 1 和 假设 2 是 具有 概率 意义 的 ， 而 假设 3 是 纯 分 析 的 ， 引 进 它 仅仅 为 了 方便 而 
已 ， 在 下 述 意 义 下 它 是 不 自然 的 ， 即 并 不 是 前 进 方程 式 组 的 一 切 解 都 满足 强加 的 一 致 性 条 件 ， 因 
此 ， 倒 退 方程 式 组 表达 了 概率 意义 的 条 件 ， 而 且 导 出 了 一 些 有 趣 的 过 程 ， 但 是 ， 对 前 进 方程 式 组 就 
不 能 这 样 说 ， 这 就 说 明 为 什么 马尔 可 夫 过 程 的 全 部 理论 都 基于 倒退 方程 式 组 (或 者 抽象 地 说 ， 基 于 
函数 变换 的 半 群 比 基 于 概率 测度 好 ). 
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e,D=—And), LDS Ar (D+ a CE， (9. 20) 
pe AT EAH. APE PRIA EAA. PURE XT t= 0 
的 初始 值 所 惟一 决定 ， 因 此 ， 转 移 概 率 相继 地 为 Pj, O=0, 4k, 
A; 


P; =e, ii 一 一 
了 一 ee Pii Ct) PF 


(et eT), (9. 21) 
Pp, (2) =a) csP , (1—s)ds. (9. 22) 
为 了 看 出 这 些 转 移 概率 满足 查 普 曼 - 科 尔 莫 戈 罗 夫 方程 式 (9. 1a)， 只 需 注 意 : 对 
HER Ms, EA (9. 1a) 两 边 都 是 微分 方程 式 组 (9.20) 在 相同 的 初始 条 件 下 的 
解 ， 
倒退 方程 式 组 曾 在 (8. 4) 中 推出 ， 它 们 的 形式 如 下 
y= y: CD tA A. (9. 23) 
我 们 必须 证 明 当 上 固定 时 Pi (六 满足 上 述 方程 式 ， 当 R<i 时 ， 这 显然 是 对 的 ， 因 为 
这 时 (9.23) 式 中 的 三 项 都 是 0， 当 有 一 ;一 0 和 kk 一 i 二 1] 时， 由 (9.21) MERCH 
也 是 对 的 . 现在， 我 们 应 用 下 列 事实 


P'a (=a) o> P' Gds, GF >i +1) (9. 24) 
0 


来 作 归 纳 法 .假定 当 & 一 i 所 nn 时 Pa ORE (9.23). H k=itltn, RAIBE H 
(9.23) 的 右边 来 表示 (9. 24) 的 被 积 函 数 ， 这 样 就 可 得 知 当 一 i 二 nn 十 1 时 Pi Ow 
满足 (9. 23). 

因此 ， 我 们 证 明了 : 转移 概率 组 P(t) 由 前 进 方程 式 组 惟一 决定 ， 而 且 这 些 概率 
也 满足 倒退 方程 式 组 和 查 普 曼 - 科 尔 莫 苹 罗 夫 方 程式 . 

倒退 方程 式 组 可 能 还 有 其 他 解 . 我 们 的 转移 概率 的 最 小 性 质 (9. 19) 还 可 以 复 
述 如 下 ， 对 (9.23) 的 任意 一 组 非 负 解 ， 

如 果 y0) =P (0), 则 y;(2) 之 Pi (2) (9. 25) 

对 一 切 co 成 立 ， 此 处 有 是 任意 的 ， 但 要 固定 .此 论断 对 <i 显然 成 立 ， 因 为 在 此 
情况 下 右边 为 0， 给 定 y,.1 (9.23) 的 解 y; 可 以 精确 地 用 类 似 于 9. 22〉 的 积分 表 
R, MAME (9.25) 的 正确 性 可 以 对 i 二 &,& 一 1,… 递 归 地 推出 . 

RE, BELa <o. ZIT, 第 4 节 中 已 经 证 明了 量 


不 恒 为 0。 显然 ，L.() 可 以 解释 为 从 E 出 发 在 时 刻 t 以 前 到 达 “ 无 穷 ” 的 概率 ， 也 
RIEN, L 是 微分 方程 式 组 (9.23) 在 初始 值 L,(0) =0 的 条 件 下 的 解 ， 考虑 任意 
一 组 非 负 函数 A, ， 并 定义 


P, = Pa (CD 十 | LA)ds (9. 27) 
0 
FIRU, IAEN k, Pa (1) 满 足 倒退 方程 式 组 而 且 Pa O= Pa (0). AK 
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生 了 ， 能 否 用 这 样 的 方法 由 OA, 定义 出 来 的 Py (7) 变 成 一 组 转移 概率 ， 而 且 还 满足 查 
普 曼 - 科 尔 莫 苹 罗 夫 方程 式 ， 回 答 是 肯定 的 ， 我 们 不 证 明 这 一 论断 ， 但 给 它 一 个 概率 
解释 . 

P, (六 定义 了 所 谓 吸 收 边 界 过 程 。 当 系统 到 达 无 穷 时 ， 过 程 终 止 ， 杜 布 0 首先 
研究 了 返回 过 程 ， 对 这 种 过 程 而 言 ， 系 统一 到 达 无 穷 立 即 返 回 E。( 或 其 他 指定 的 状 
D) 然后 再 按 原样 开始 ， 在 这 种 过 程 中 ， 系 统 由 E BE, 或 者 经 过 5 步 或 者 经 过 无 
穷 多 步 ， 后 者 具有 一 个 或 多 个 从 E 到 “无 穷 ” 的 连贯 ， 这 类 过 程 的 转移 概率 都 形 如 
(9.27), 它们 满足 倒退 方程 式 组 (8.4) 或 (9.23), 但 是 不 满足 前 进 方程 式 组 
(9.24) & (8.5). > 

这 就 说 明 ， 为 什么 在 推导 前 进 方程 式 组 时 ， 我 们 强行 引进 卫生 的 假设 3， 而 此 假 
设 对 倒退 方程 式 组 是 不 必要 的 .直观 的 富有 概率 意义 的 简单 假设 1 和 假设 2 与 返回 过 
程 是 相 容 的 ， 返 回 过 程 不 满足 前 进 方程 式 组 (9. 24)， 换 句 话说， 如 果 我 们 从 假设 1 
和 假设 2 出 发 ， 则 科 尔 英 划 罗 夫 倒退 方程 式 组 成 立 ， 但 是 ， 对 前 进 方 程式 组 ， 还 必 
须 加 另 一 项 . 

纯 生 过 程 确实 太平 凡 了 ， 但 是 ， 如 前 所 描述 的 和 条件， 对 最 一 般 的 科 尔 莫 艾 罗 夫 
方程 式 却 是 典型 的 ， 然 而 ， 会 出 现 两 个 本 质 上 是 新 的 现象 : 第 一 ， 生 过 程 仅 包 含 一 
条 漂移 到 “无 穷 ” 的 线路 ， 用 抽象 的 术语 来 说 ， 一 个 单一 的 边界 点， 与 此 对 比 ， 一 
般 过 程 可 能 包含 具有 复杂 的 拓扑 结构 的 边界 ， 第 二 ， 在 生 过 程 中 ， 由 于 只 有 E> 
E ,这 种 转移 才 是 可 能 的 ， 所 以 其 运动 直接 趋向 边界 .可 以 构造 各 种 不 同类 型 的 过 
程 ， 例 如 ， 题 倒 方 向 可 以 得 到 男 一 个 过 程 ， 在 这 个 过 程 中 ， 只 有 EAE, 的 转移 才 
是 可 能 的 ， 这 种 过 程 不 是 在 边界 结束 ， 而 是 在 那里 发 源 ， 在 生 灭 过 程 中 ， 如 像 在 一 
维 扩 散 中 那样 ， 沿 两 个 方向 的 转移 都 是 可 能 的 ， 在 这 种 情况 下， 存在 与 扩散 理论 中 
的 弹性 壁 与 反射 壁 过 程 相 类 似 的 过 程 ， 但 对 它们 的 描述 ， 已 超出 本 书 的 范围 了 . 


17.10 J Fel 


L 在 由 G.) 定义 的 纯 生 过 程 中 , 令 为 之 0 对 一 切 n 成 立 证 明 : 对 每 个 固定 的 ?之 ]， 
P,O BEFORE FESO. WE n 是 极 大 值 的 位 置 ， 则 二 之 过 二 …， 提 示 : AAS 
纳 法 ， 微 分 (3. 2). 

2, GLA). WEL =, WIE n>. Ar: WR ar, MIREGI >r, EJ AnP 
Ct) BBS. MHH (4.10). 

3 尤 尔 过 程 ， 导 出 由 (3.4) 定义 的 分 布 的 均值 与 方差 . [ 仅 用 微分 方程 式 组 ， 不 用 (3. 5) 
的 精确 表示 式 . | 

4. 纯 灭 过 程 ， 求 出 仅 有 转移 E > 已 :的 尤 尔 型 的 过 程 的 微分 方程 式 组 ， 假定 初始 状态 是 
E, RADA P(t)， 和 和 它 的 均值 与 方差 . 


1. 进一步 的 细节 ， 参 见 第 二 卷 第 16.8 T. 


5. 
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停车 场 ， 设 某 停车 场 有 NN 个 泊位 ， 且 来 到 此 停车 场 的 车 流 是 一 个 具有 参数 1 的 泊 松 流 ， 
但 只 当 有 空位 可 泊 车 时 才 这 样 . 试 求 恰 有 个 泊位 被 占用 的 概率 P(t) 所 满足 的 微分 方程 
式 组 . 
各 种 排队 规则 ， 考 虑 一 个 具有 单一 线路 的 按 第 7 TA C 中 所 给 定 的 规则 服务 的 等 待 队 
Fl, 这 时 ， 我 们 考虑 的 过 程 完 全 从 在 时 刻 0 呼叫 的 史密斯 先生 的 观点 出 发 ， 他 的 等 待 时 
间 依 赖 于 排队 规则 ， 即 是 在 等 待 队 列 上 的 呼叫 通过 的 次 序 ， 下 列 几 种 排队 规则 最 为 重要 
(a) 后 到 后 服务 ， 即 是 呼叫 按 到 达 的 次 序 通 过 . 
(b) 随机 次 序 ， 即 是 在 等 待 队 列 上 的 每 个 成 员 ， 都 有 相同 的 概率 作为 下 一 个 被 服务 者 . 
(c) 最 后 到 的 最 先 服 务 ， 即 呼叫 通过 的 次 序 与 到 达 的 次 序 相 反 .… 
把 状态 从 一 1 开始 标号 是 方便 的 ， 在 史密斯 的 实际 服务 时 间 内 ， 我 们 说 系统 处 于 状态 ED, 
而 当 其 服务 结束 时 ， 系 统 处 于 状态 En ， 而 且 它 永远 停留 在 此 ， 对 ”之 1， 如 果 史 密斯 的 
PF AY — A SA n— 1 SORRY (这 2 一 1 个 呼叫 将 要 或 可 能 先 于 史密斯 得 到 服务 ) 一 起 在 
等 待 队列 上 ， 则 说 系统 处 于 状态 EL. 《正在 被 服务 的 呼叫 不 包含 在 等 待 队 列 内 . ) 令 P, 
(2) 是 时 刻 上 系统 处 于 五 , 的 概率 .证明 : 

P’_.(t)=pPo(t) (对 三 种 排队 规则 都 对 ). 
此 外 ， 
(a) 在 后 到 后 服务 的 规则 下 ， 有 : 

P’,.(t)=—pP, (ft) +pP,-1 (2) ,n>0. 

(b) 在 随机 服务 的 规则 下 ， 当 n 之 2 时 有 : 


P (一 一 (十 站 已 十 = 二] Pott (四 十 MP C), 


P' O= AHP OHP), 


Po (4) =—pPo lt) +pP1 O HEP OHP + 


(c) 在 最 后 到 的 最 先 服务 的 规则 下 ， 当 nn 之 2 时 有 : 
P',(0)=— Atw Pa) +P ati lt) FAP na C, 
Pi (一 一 (十 AD Pi) +pP2 (2), 
P'o O= pyPo AHP A). 
(也 可 参见 习题 20. ) 
( 续 上 题 )， 假 定 服务 规则 是 后 到 后 服务 (情形 a) mH P,(0) =1. 证明 : 


( yk 
POC! 
( 续 上 题 ), 把 习题 6 推广 到 有 a 条 线路 的 情形 . 
kE Eg, 这 是 一 个 非 平稳 的 纯 生 过 程 , 它 的 参数 A 依赖 时 间 


_ 1an 
An E) = l+at’ 


e" 5 OKS r. 


(10. 1) 


1. 当 最 后 的 信息 〈 或 观察 值 ) 带 有 最 大 的 权 的 时 候 ， 这 种 规则 在 信息 传输 机 中 是 有 意义 的 ， 此 种 处 置 
来 自 文献 L132]. 


10. 


11. 


12. 


13. 


14. 


15. 


16. 
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证 明 具 有 初始 条 件 Pu (0) =1 的 解 为 : 
Po (@)=(+art)7'", (10. 2) 
PP.) = (l+a)(1+2a):"{1+(— la} 


M (ll 二 at) t", 
再 由 微分 方程 式 组 证 明 其 均值 与 方差 分 别 为 上 和 上 万 1 十 at 

( 续 上 题 )， 波 里 亚 过 程 可 以 由 第 5. 2 节 例 (CC) 中 的 钢 子 模型 取 极 限 而 得 ， 如 果 把 系统 的 
状态 定义 为 抽出 的 红 球 的 个 数 ， 则 在 第 ntl 次 抽取 中 玉 一 玉 +1 的 转移 概率 为 : 


= rtke _ prky 
Pen bn l+ny’ (10. 3) 


此 处 p=r/(rt+b), y=c/ (rto). 

如 像 从 伯 努 利 试验 过 渡 到 泊 松 分 布 那样 ， 设 抽 球 以 六 个 时 间 单 位 为 一 次 的 速度 进行 ， 
并 令 h--0, n> oo}. np>t, nat. UE (10.3) 取 极 限 导 出 〈10. 1)， 并 证 明 
第 5 章 (2.3) 的 波 里 亚 分 布 化 为 (10. 2). 
线性 增长 ， 如 果 “(5.7) 定义 的 过 程 有 4 二 py 和 Pi1(0) 一 1， 则 
(At)! 


Py (= 72> ,Pi = (10. 4) 
最 终 灭 绝 的 概率 为 1. 
( 续 上 题 )， 取 P, (i) 一 A()B"(z) 作 为 《5.7) 的 一 个 试验 解 ， 证 明 满 足 P (0) 王 1 的 解 为 : 
Pu (t)=pB(t), P, (2) = (1- ABC) aB y CABO 3s (10. 5) 
其 中 
1 一 ep 
BO) awe (10. 6) 
GELA) HRR PCS D= VPLS ERAIN EA: 
P fu ato stas E, (10. 7) 
(4 LE). SM, (D= FrP, O MO = nP) (如 第 5 RE). HERK: 
M (O =2AaA WM: D HATMA). (10. 8) 
DSa 时 ， 试 推出 (Peo) 的 方差 为 : 
ez pi 人 1 一 ee 人 Qty) (Aap). (10. 9) 
对 过 程 (7.2) 来 说 ， 母 函数 PCO = DPS" 满足 偏 微分 方程 式 : 
站 一 (一 5 (aP +u È). (10. 10) 
其 解 为 : 


P(5,t) =e Ne Me £1 — (1 —s)e }i. 


当 i 二 0 时 ， 这 是 具有 参数 A(1 一 e”* )/u WIA. teo, DA PO RTH 


有 参数 和 /的 泊 松 分 布 . 
对 (7.26) 定义 的 过 程 而 言 ， 稳 定 态 的 母 消 数 PCs) = > prs” 满足 偏 微分 方程 式 
(pt hs) aP, (10. 11) 


其 解 为 P= utas) / AH}. 
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17. 


18. 


19. 


20. 


21. 


22. 


23. 


对 微分 方程 式 组 (7. 26) ， 取 一 个 形 如 
P.(D)= (0 )A" (QA) 
的 试验 解 ， 证 明 它 确实 是 解 的 充分 必要 条 件 是 


__A_ a a~ Atut 
A 1 二 24 e “THE. 


在 “最 简单 的 占线 问题 ”的 第 7 贡 例 (a) 中 ， 令 Q ORR E, 出 发 在 时 刻 t 以 前 到 
达 E., 的 概率 . 证 明 Q, O 满足 微分 方程 式 : 
Q(t) = — Atm HR O FQ- C) , (n2), (10. 12) 
Q O=—-AtWQ ()+1Q:.() +p, 
及 初始 条 件 Q (0) =0. 
( 续 上 题 )， 考 虑 由 任意 一 个 前 进 方程 式 组 所 定义 的 过 程 的 同样 的 问题 . 证 明 ，Q. bo) 满足 
对 应 的 倒退 方程 式 组 〈 对 园 定 的 k), AP Pu (OREA 1. 
HA: 习题 6 中 的 微分 方程 式 组 本 质 上 与 转移 概率 的 前 进 方程 式 组 是 一 样 的 ， 推出 相应 
的 倒退 方程 式 组 . 
假定 两 个 方程 式 组 (前 进 和 倒退 ) 中 至 少 有 一 个 方程 式 组 的 解 是 惟一 的 . 证 明 转 移 概 率 
EAE S ARRAS RTEA (1. 1). 
提示 : 证 明 两 边 都 满足 具有 相同 的 初始 条 件 的 同一 微分 方程 式 组 ， 
令 Pa (0 满足 查 普 曼 - 科 尔 莫 戈 罗 夫 方程 式 〈1. 1)， 假 定 P44)>0 ME S(O =D) Pa 


(O<1. TEA: 或 者 对 一 切 : 有 S;(?f) 二 1; RER ASO. 

遍历 性 质 ， 考 虑 一 个 具有 有 限 多 个 状态 的 平稳 过 程 ， 即 是 ， 假 定 微分 方程 式 组 (9.9) Æ 
有 限 的 ， 而 且 系数 c; 和 pi 都 是 常数 ”证 明 : 解 为 指数 项 e? 的 线性 组 合 ， 除 非 人 三 0， 
其 中 人 的 实 部 是 负 的 . 证明 其 转移 概率 的 性 质 与 有 限 的 马尔 可 夫 链 (除去 周期 的 情形 ) 
的 情形 是 一 样 的 ， 


l. 


12. 


15. 
16. 


17. 


18. 


“J el FR A 


第 1 章 


(a) 3/5; (b) 3/5; (ce) 3/10. 

事件 Si ,S ,Si US: UR SS 分 别 包 含 了 12,12,18 和 6 个 点 . 

这 个 空间 包含 了 两 点 HH 和 TT， 其 对 应 的 概率 各 为 1/4; 包含 了 两 点 HTT 和 THH， 其 
对 应 的 概率 各 为 1/8; 一 般 地 包含 各 具有 概率 2 一 的 两 个 点 (n2). 这 些 概率 之 和 为 1， 
因此 不 笛 要 考虑 无 穷 的 抛掷 的 序列 的 概率 ， 我 们 所 要 求 的 两 个 概率 分 别 为 15/16 和 2/3. 
P{AB}=1/6, P{AUB}=23/36, P{AB’}=1/3. 

在 事件 (a). (b) Al (g) P, r=0. 

在 事件 (Ce), C) 中 ,x=1. 

在 事件 (d) P, r=2. 

在 事件 (c) P, r=4. 

(a) A; (b) AB; (© BU (AO). 

(e). (d), Ce), (H, Ch), G), (k), CD 是 对 的 .除非 CCB, Bll (2) 是 无 意义 的 . 
甚至 在 这 一 情形 下 ， 一 般 也 是 不 对 的 ， 但 是 在 特殊 情形 CCB, AC=0 下 ， 它 是 对 的 ， 如 
R CDAB, W (b 是 对 的 ，(g)〉 应 该 是 (AUB) 一 4A 一 4 了， 最 后 ， 由 于 Ck) 是 对 的 故 
() 不 对 . 

(a) ABC ; (b) ABC; (c) ABC; (d) AUBUC (e) ABUACUBC; 

(f) ABC UA'BC’ UA‘B'C; (g) ABC UAB/CUA’BC=(ABUACU BC) —ABC; 

(h) ABC G) (ABC) 

AUBUC=AU (B—AB) U{C—C(AUB)}=AUBA’ UCA‘B’. 


第 2 章 


(a) 26°; (b) 26: 十 263 一 18 252; (c) 26°+26°+26'. 在 一 个 有 20 000 个 居民 的 城市 中 ， 
或 者 有 姓名 缩写 相同 的 ， 或 者 至 少 有 1748 个 人 的 姓名 缩写 多 于 3 个 字母 
2(20 —1)= 2046. 


n _nlntl) 1 
(2 tn , 4, (a) s b) 


4 一 ( 训 ) ， w=(2) +12(2)° = 


(a) pi =0. 01, p: =0. 27, p; = 0. 72; Cb) pi = 0. 001, p: =Q. 063, p = 0. 432, 
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13. 


14. 


l5. 
16. 


17. 


18. 


19. 


20. 


2l. 


Zz. 
23. 


24. 


ZO. 


26. 


2T. 


28. 


ps =0. 004, 


二 (10),10“， 例 如 ps =0.72, pro =0. 000 362 88， 斯 特 林 渐 近 公 式 给 出 pio =0. 000 359 8…. 
(a) (9/10)*; (b) (9/104; (c) (8/10)*; (d) 2 (9/10)'— (8/10)*; (© AB 和 AUB. 


(2 )n! n. 


12、 1 
ə) ( 3 TES 
， 恰 为 r RARR (ai) / m,n. 
a) [135s (2n—1)] =n! / (2n)!; 


Cb) (nt) [Le 80 aDJ =z (2"), 

假定 它 具 有 随机 性 ， 则 12 张 罚 款 单 全 部 都 在 星期 二 和 星期 四 的 概率 为 《2/7) = 
0. 000 000 3…. na (,)=21 日 子 ， 所 以 即使 对 任意 两 天 来 说 ， 这 个 概率 仍然 很 小 ， 因 
此 ， 有 理由 认为 警方 是 有 其 体系 的 . 

假定 它 具 有 随机 性 ， 此 事件 的 概率 是 ( E) ， 近似 于 十， 不 可 能 有 可 靠 的 结论 
(90) 10 /(100) 190 =O. 330 476%». 


(251) (57557 =0. 002 09+, 


2(n—2),(n-r— Dt 2 一 ”一 1) 
n! n(n—1) `’ 


83 


l 
(a) 5163 Cb) 3888 


概率 为 1 一 (> ) =0. 517 747… 和 和 1 一 (3) =0 491 404.…. 

(a) (n—N),/ (n); (b) (一 N/n)'"， 对 于 r= 二 N= 二 3， 概 率 为 (a) 0.911 812…: 
(b) 0.912 673 …， 对 于 r= 二 N= 二 10， 它 们 是 (a) 0.330 476; (b) 0. 348 678…. 
(a) (1—N/n)’"; (b) Gdn / © GON)’. 


(1 一 2/n)? ~; A RG WSF O27! =0. Tn. 
假定 它 具 有 随机 性 ， 三 个 或 者 四 个 都 是 〈a) 某 一 个 女孩 打破 的 ; (b) 最 小 的 女孩 打破 的 


> 13 i3 
EA BNA ~0. 2 和 580 05. 


(a) 121 /12 “一 0.000 054; (b) (2) (26—2) 12™*=0. 001 37…. 


301 (2 
2565 \ 6 


o (Pa G w oF ee G) © Va)“ a) 
SC): 


p= (NY GN) Varn. 


) 1272 a0. 000 35+. 
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4 
(DP NGIE)_ (Oe 
5 39\ /26 52 ' 
(33) G3) (a3) (13) 
o saama a(S ETEO) 
3 (4) (ona) (26) 
(Vasa) Os) Gs) CS )( se ) 
2 9\ /2 i 
(13) G3) G3) 
33. (a) 24p(5,4,3,1); (b) 4p(4,4,4,1); (co) 12p(4,4,3,2). 
FEG) 
(1) 
概率 ， 参 见习 题 33. | 
35. po(r) =(52—-1)4/(52)43 pi(r)=4r(52—r)3/ O2); pz Cr) = 6rCr— 1) (52—-91)2/C52)43 
bs (r) =4r(r—- 1) (r— 2) (52-1) /(52)45 par /052)4. 
36. 第 1 ,ee ,第 4 个 爱 司 的 等 待 时 间 超 过 r 的 概率 为 wi (r)= po (7); w (7)= po (r) +p (r); 


w (7) =p (+p Npe rnw NSl pr. BR, fira=war—-D-w). 中 位 
A 9,20,33,44, 


ar. cd (AYA (BAY E ET) 中 ese, 
w» (WOEDE Kh 
39, ne) (ame 


ro 


. [一 手 牌 含有 某 种 花色 的 牌 a 张 ， 另 一 种 的 上 张 …… 这 一 事件 的 


40. (77°) (+1). 


4), Orta! 
rilrotrs! 
42. (49),/(€52),4. 
43. P{(7))} —10+107? 一 0. 000 001. 
10! Il goa — 
P{(6,1)} aT 1 6 10 0. 000 063. 
_ 10! | a 。1n-7 — 
P{(5,2)} 一 LTTT * DIS 10 0.000 189. 
_ 10! | 7! _ 
P{(5,1,1)} 一 和 211T “ T1115 10 0. 001 512, 
P{(4,3)} ~ 10L. ZL. iy 一 0. 000 315. 


81111! 3141 
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P{(4,2,1)} =a . TT ~ 1077 =0. 007 560. 
Pi(4,1,1,1)} Sgr m ©1077 =(. 017 640. 
P&(3,3,1)} =F . MEET -1077 =0. 005 040. 
P{(3,2,2)} =F . AAE . 107 =0. 007 560. 
Pp{(3,2,1,1)) 一 Ti . MAE -1077 =0. 105 840. 
P{(3,1,1,1,1)) = IT . 1077 =0. 105 840. 
Pp{(2,2,2,1)) -i IA 1077 =0. 052 920. 
P{(2,2,1,1,1)) =a papier O 0, 317 520. 
P{(2,1,1,1,1,1)) = Tr 107 =0. 317 520. 
P((1,1,1,1,1,1,1)) =a .71 1077 =0. 060 480. 
44， 令 S,D,T,Q@ 分 别 表 示 一 重 、 二 重 、 三 重 、 四 重 ， 则 我 们 有 
P{22S) = » 3657” =0. 524 30. 
P{20S+1D} =n T . 365-2 一 0. 352 08. 
Pp{18S+2D) = . om » 36572 —0. 096 95. 
P{16S 十 3D) 一 有 . GAAR . 36577 —=0, 014 29. 
P{19S+1T} 3 l gg ~ 36577 一 0.006 80. 
P{171S+1D+1T) E . TAE . 365722 =0. 003 36. 
P{14S4+-4D} =I . IAAP . 365-2 =0. 001 24. 
P{15S+2D+1T} Beyer . AAE . 36572 一 0.000 66. 
Pf18S 十 1Q) 一 让 365- =0, 000 09. 
45. 2 g=()=2 598 960， 概 率 为 (a) 4/q; (b) 13。12 .4， gas 
(c) 138 °12+4+6 Qa (d) 9 e 4 1 Ce) 13. (» ); 4°4% sq! 
=F (f) (>) 11.6°64g =a; (g) 13， (») 6+ eg tare 


18. 


19. 


20. 


21, 


24. 
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99/323. 2.0. Zl. 3.1/4, 4.7/2°, 
1/81 和 31/6, 
EA 为 事件 (ky D 不 出 现 , 则 由 (1.5) # I-p, =6(2) —(3) (SB) 4+(2) (8) 
—(°) (2) +6(8)-(8). 


& p=(33). 则 S=-13( ) 2 Ss = (3) (5) S.=40( 3 )z. HEALEY Poo = 


0.096 58; Puj =0. 0341; Prey =0. 0001. 
N 
N hy" 
__ È 
w= >, < 1) wale DE 
N N\ Cn— gk) 
u, = > a ) a, 关于 两 个 公式 的 一 致 性 的 证 明 ， 请 参看 第 2 意 (12.18). 


一 - 般 项 为 Qik, Ark, “人 RN， 其 中 (ki >Re tts Rn) 为 《1 ,2 人 ) 的 - -个 排列 ， 对 于 对 人 角 
TOR RL ky =v. 


~ n\ (ns—ks), 
.w= Don Cea, 
， 注 意 : EMA r<n htu. =0, H un, =n!" CS) 
K, n—1\ (ns—ks),- = n—1 O k+l! 
wm= DODE (FC) Sa. RRRA Do ( ja ) . 


k=] 


(3) GO) eee GG) 


= 1 /52—13k l l 7 
mi Se = ( )(———}. 则 近似 地 有 Pro) = 0. 264, Pry =0.588, Pry =0. 146, 


Pra, = 0. 002. 
应 用 (13)S ~ (4) (33 一 3 


0.014 845, Pr 一 0.000 330，P 一 0.000 002. 


). 则 近似 地 有 Pro = 0.780 217, Pry =0. 204 606, Pra = 


N—m 

m! N'um = >) (SD (N—m—k)!/k!. 
k=0 

参看 下 面 的 公式 一 2 的 情形 . 

(rN)! += (2) PrN-2)! — (PND Tt DNN OND. 
天 
(a) 
(mtr) 


r 


S (1 (77) (PTIT) 


b=) 


Prm = 
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29. 
26. 


20. 


23. 


All FASS 2 BE (12.16) A (12. 4), 
令 Un =A, U “es U Ân 并 注意 Unti = Un U An+1 和 UnAn+i = (A) Ane ) U .. U 
(ANA n+1). 
第 5 章 
Os 1 
(6), 2° 
p=1—Av-25=0. 61 
35 39) 7 o = 35 39\ a. 
(a) (3) / (G3) =o. 182…， 恰 有 一 个 爱 司 的 概率 为 (33) / (38) =0.4n , 
(b) 近似 地 为 1 一 0. 182 一 0. 411=0. 407. 
23 23 
(10) li (12) 13 
(a) 2° (28) 50! Cb) 1 (28) 80 
13 13 
125 140 80 
345° 345° 345° 
20 
21° 
5 2 
(=) 
5 2 
P 
2— p 
《Kb Sy Co) 2 (+) 
a) Bana ba Ey ea En 5 BY ty | lbn E lea |= E lanta IE | Bett |H 
leni D. Ale, | an| +46 | + |e | 几何 级 数 地 上 升 . 
= (1 一 加 ) (l—p.) … py). 
， 应 用 不 等 式 1 一 + 过 e-” (0 过 x 之 1), 或 者 log l-DHEMRR;, 参看 第 2 章 (8. 12). 
b+c 
btecetHr 
. WERE bor 和 c 对 第 1 次 抽取 是 对 的 这 个 事实 的 话 ， 考 虑 在 第 1 次 抽取 有 两 种 可 能 性 ， 
b+c r o= b b: 
则 在 第 n 十 1 次 试验 是 黑 的 概率 为 > byte! br’ b+rte b+r 
前 面 一 个 问题 说 明 ， 这 个 论断 对 m= 1 和 一 切 n 都 是 正确 的 . 由 归纳 法 ， 考 虑 第 一 次 试验 
的 两 种 可 能 性 . 
利用 第 2 章 (12.9). 
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24. 右边 的 二 项 系数 是 (8.2) 中 的 分 子 的 第 一 个 因子 的 极限 ， 注意; (71/7) ~ 
(Tate, 


26. 由 (5.2) 有 2v=2p0—py<t 


O° 
28. (a) uw’; (b) uw? tuvtd /4; Cc) u® +(25uut9V +uwt2uw) /16. 


32 Pu = p32 = 2 pn =p, Pre = pzz = 2 p23 =q» pis = py =O, pa=. 


第 6 Et 


l. 5/16. 


2. 其 概率 为 0.028 04e 
3. (9, 9)* <0. l, x222, 


4. 8 远方 和 —4py'<—, 其 中 p= (S 


5. 1— (0.8)! —2(0. 8)? =0. 6242- 
6. {1— (0. 8)! —200. 8)°}/{1— CO. 8)! }=0. 6993+ 


7 (2) GE) / (5) -0.008 951- ( 17) 2 =0. 009 s2- 


8. (5) (678 —2 © 127°}, 


9， 正确 的 值 为 0. 6651+++,0. 401 87… 和 0. 2009…; 泊 松 逼近 为 1 一 e 二 0.6321…，0.3679… 
和 0. 1839…. 


DZ 


ra) 因此 分 别 为 + 之 263 Fl 1266. 


TaD 


10. e7? > 2# /k!=0. 143%, 


4 
11. ew! >, 1/k!=0. 080 
3 


12. e 2% <0. 05 或 者 r300. 

13. e 1 =0. 3679+, 1-2*e '=0. 264-- 

14. e 7X0. 01,725. 

15. 1/p=649, 740. 

16. 1—p", FP p=p0;A) +e + plk). 

18， 当 k=0 时 为 8; 4 k=1, 2, 3H pg; ; 4 k=4 时 为 pq’ 一 p. 
19. >) (7) = (7) ”As1/ Vn 对 充分 大 的 nt. 


k=0 


20， (APE p, eM ER: oS) (H at ee a te 


k=a 


第 a 次 成 功 发 生 在 第 & 委 2 一 1 次 失败 以 后 的 概率 . 
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ZN—l|l—r 


21. x, =( N—] 


) . 9—2N+r+] 


N N 4 
22, (a) x= >) 22) (ONE), (b) 应 用 第 2 章 C12. 6). 
r=] 


r=] 


23. k:npi; ki npr 这 时 nk ko /ks. 


n n— Si N— S,—1 Gn sg wey) . _ 
24, ( ° ( | erp 5 Oy HP s; 5n Het ni. 
25. PZpigl pg tpg). 
31.， 由 对 数 的 泰勒 展开 

bOn py =q = (U1—A/n)"<e * = p(0;A). 
对 每 一 个 分 布 来 说 其 各 项 之 和 为 |， 因此 ， 不 可 能 有 这 样 一 个 分 布 ， 它 的 各 项 都 大 于 另 一 个 分 
布 的 对 应 项 ， 


32. 泊 松 分 布 中 只 有 有 限 多 项 大 于 6 ， 其 余 各 项 支配 二 项 分 布 的 对 应 的 项 . 


nw 
第 7 章 
32 
Ll 如 第 1 节 一 样 进行 . 2. 应 用 1.7). 3. n| -5 | =o 143.…. 
4. 0.99, 
5. 511. 
6. 66,400. 
7. 非常 确切 ， 第 6 章 的 不 等 式 足 以 说 明 ， 超 过 8 倍 标准 差 是 很 不 可 能 的 . 
8. Cnn) {p ph (lO—p — po) 72, 
a ir m 
第 8 章 
l. 6 一 21. 


2. zx 一 bx 十 co 十 mr， 其 中 u, v, w 为 下 列 方程 组 的 解 : 


pel pl 
u= pr! + (qut rw) =P US (put rw) zt ， 


w= put qv rw x. 


_ pool 
3, u= p +(qut ro) ee ， 


l— p 
— „8! — yr! 
v= (put re) TE w= (put qu) TE; . 


4. 注意 ! P{A,}<(2p)"; BÆ P{A,}>1— CU pt lee RR pas 则 最 


后 一 个 量 一 二 ;如果 p>1/2, M P{A,} 不 会 趋 于 0 


10. 


12. 


13. 
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可 能 的 组 合 为 (0,0),(0,1),(0,2),(1,0),(1,1),(2,0),《2,1),(3,0).， 它们 的 概率 分 别 为 
0.047 539,0. 108 883,0. 017 850,0. 156 364,0. 214 197,0. 321 295,0. 026 775,0. 107 098. 
(a) ARATE A PA 写成 6 行 6 列 的 矩阵 ， 其 主 对 角 线 上 的 元 束 为 9,2g,，…6qg， 其 中 


=>. 主 对 角 线 一 边 的 元 素 全 为 0， 男 一 边 的 元 素 全 为 9。(b) ECX) =7/2, Var(X) = 


-161 2555 105 
,ECY) Var D = fos FP. 


fe x. weer 其 各 行为 以 32-! 乘 (1,0,0,0,0,0),(0,5,4,3,2,1), (010,663, 
0),(0,0,0,1,0,0); 
对 X，2 的 联合 分 布 来 说 ， 其 各 行为 以 32-: 乘 (1,0,0,0,0,0),(0,5,6,1,0,0), (0,0,4,6, 
1,0),(0,0,0,3,2,0),(0,0,0,0,2,0),(0,0,0,0.0,1); 
WY, ZMRS4 HHI. HATAL 32 1Æ1,0,0,0), (0,5,6,1), (0,4,7,0), 00,352 
0), (0,2,0,0), (0,1,0,0), 
X+Y 的 分 布 为 (1，0，5，4，9，8，5) RA 32, 而 XHY MAM 0 到 6; XY 的 分 布 为 
(1,5,4,3,8,1,6,0,3,1) 除 以 32, XY 的 值 由 0 到 9. ECX) =5/2, E(Y) = 3/2, E(Z)=31/ 
16, Var(X) =5/4, Var(Y) ~—=3/8,Var(Z)=303/236., 
(a) p/(1+q@); (b) 1/Citqt@); (© 1/+¢q)’. 
V, 的 分 布 由 《3.5) 所 给 出 ， 由 于 对 称 性 ，U, 的 分 布 同 样 可 求 出 ， 
(a) PiX<tr, Y >s} =N” (rst 1)” Xf ræs; 

N” lrst 1) — 2r s)” + rs 1)" } ors 

N”, r=5s. 


+ Covi X, Y)= 一 一 


PiX=r,Y=s}= 


一 ? 
， 咎 7J<r 且 R<r 


rr? 
一 一 一 一 一 一 一 ， 44 < =r, i — <r 
T r 一 (r--1)" Ay J r 和 上 & r 或 者 3 r kr 
r=0, A jJ>r MR kor. 


nN? 
(nT1) (nt) 


n GOB ME 2p p to, SABLA 1/(2p9). 
Pi: N=n, K 一 到 一 (7 JE aa a gp. k<n 


(c) of < 


P{N=n}=(1—gp’)"gp . 
/ / 一 天 一 】 iio? 
P(K=k}=(ad Yqp’ >) o (m= 0a" 


E(=44)= Dy bP en nt Da PG > (1 一 -— )(p' 二 gq )"! 
n=] 


f f F 


_ 4 FPG 
l—qp (lgp i log op 


1 
ap 
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14. 


17. 


18. 
19. 
20. 
21. 


2D. 


26. 
27. 


28. 


30. 


33. 


10. 
11. 


BECK) = ;EN)= E, 


Co K, N) =L. (K, N)= —t 
qp | ý V 1 一 9 


(a) p=p*atdpsECXY=pq +qp ';Var(X)= pq ° tgp * 2. 
(b) g=pd itd pi; PiX =m Y =n =p" t e tei p, EP m, naal; 
ECY) =2;0° =2( pq '+qp'-1). 


(7 J364 365, 


(a) 365{1— 364" 。 365 7 — n364! * 3657}; (b) 228. 
(a) =n, =(n—-Dn; (b) p=(nt1)/2,0: =F —1)/12. 
ECX) =np ; Var(X) =np; (1— pı); Cov( X,Y) = np po. 
一 n/36， 这 是 问题 20 的 一 个 特别 情形 . 


-N N. _ Sv N(Nertk—1) 
EY D= >) pq Var(Y,) 2 . 


2- G kF] 
(a) l-gs (b) EXO=N (Ig +e} (0) EE =o, 
> (1 一 p;)"， 当 第 j 类 不 出 现时 令 X =1 否则 X; 为 0. 
E(X) =D, Var(X) =e En, 
E(S,) = 75 Var(S,) = Re 
E(#)=,r ye (“1 p= > po i) A7) logp. 


为 了 由 第 一 公式 推出 最 后 一 个 公式 来 ， 先 令 f(g) —=rDer (Fh) dc. WB 2 章 


(12. 4)， 我 们 发 现 Fo) 王 ro (1 一 0 一 ， 则 重复 利用 分 部 积分 法 可 以 推出 我 们 的 绪论 ， 
第 11 章 


sP(s45 PC). 
(a) (1—s)- -iP(Cs); b) (1—~—s) !sP(9)3 (ce) {1 -sP(s)}/A—5)3(D pos t +il—-s P 


OMA; Ce) HPHP). 

U(s)= pqs’ /(1— ps)(1—qs). BEX 1/pq, Var=(1—3pq)/p'¢’. 

母 函 数 满足 二 次 方程 式 ，A(s) = AMG) +s. 因此 AG) 一斑 一 于 VE, Ba = 
_, {2n 2? 

n (i ). 

(a) POFO pqa]; b) P (5s) HECG HeH] pq]. 

(a) (q/p)'®” (5); (b) (gq/p)’ E (SU). 


12. 


13. 
14. 


15. 


16. 


17. 


2l. 


22. 
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利用 X, 的 几何 分 布 的 母 函数 ,不 需 计算 ， 我 们 有 


P.o =s (NZ) (N2). (AEL), 


P.0s){N—(Cr—1)s} =P,-1 (6s) (N—-r—1)s. 
SSS 
人 一 CN 一 1 六 一 (CN 一 2 人 5 N—-(N—-D)S 
S 是 具有 共同 的 几何 分 布 的 7 个 独立 随机 变量 之 和 .因此 
ret) 

; . 


P,(s)= 


) ， Pre =g p* ( 


Tr 一 


(a) P{R=r}= 5) P{S 1 =k} P{X,Su—h} 


一 > g`! p! (TE Ppp (E72) 


v— l 


4 
l— ps 


E(R)= +> ,Var(R) = 


yw (Nt+v-2\° _ 
(b) (pi po)” 2, ( y—] ) (qiq) > 
$E., lst tA Ss dst etea ts Hs tee ps"), 
Un =q + ` (E Ed ws 其 中 ww 二 1 二 gyw 一 ,ws 一 户 十 .利用 递 推 关 系 具 
k=3 


有 卷 积 形式 这 一 事实 ， 得 


(ps)? 
(1—gs)° 


Uy = PU —\ T Gun] s Un Pun Hauis t = pu- tqur-1. 因此 UG) 一 1 二 psW(s) 十 qsU(s); 
V(s) = psU(s) +qs ° VCs); WCs) = psV(s) TqsW(s). 


第 13 章 


只 需 证 明 对 于 FCs) 一 1 的 所 有 根 sl 我 们 有 |s| 之 1， 且 仅 有 周期 情况 才 可 能 有 |s| 一 1 
u= | (P e, ~1/ Gan”. 因此 仅 当 r 一 2 时 8 是 常 返 的 ， 对 于 "一 3 数值 积分 的 切 
线 法 给 出 


U(s)= 


~ Jimny. Ak, ula asa ® $ de. PREL uae. 047 和 f~0. 045. 


wan = (APP) pegs, BET EVADERE OBIE th ABO 


律 的 一 个 推论 . ) 
MD PZEP(XDO}<1 推出 f 过 1， 除非 PLX > 0) = 二 0， 在 这 种 情况 下 ， 所 有 的 Xi <0, 
BS 出 现在 第 1 次 试验 或 从 不 出 现 ， 
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14. 


15. 
16. 
18. 
19. 


10. 


li. 


Z 一 不 小 于 (2 一 NAr 的 最 小 整数 ， 此 外 ， 开 (2Z ~np/C¢et pr), Var(Z,) ~npql¢t+ 
pr). 
G(s) = EWS FO) = 9st psGs) w=’. 


l—st pqs)’ 


_ U~qs) Bogs) : 
G(s) 1st psB(qs)’ 而 F(s) 如 习题 8. 


2 
,NN* 2 (N,—7]14.3) /22. 75; n(—)—m(-— Jw. 
3 


l 


, ee ee HR yn =r, =nm=1; R(s)= (842s )(8 一 8s 十 28 —s?)'; 


r, ~l. 444 248(1. 139 680) "£. 

如 果 w 为 一 个 长 为 + 的 A 连贯 在 第 n RR, MWE (7.5) PU a RB p, A 
1 一 a 代替 g， 即 得 A(s). 设 BC(s) 与 CCs) 分 别 为 对 应 于 B 连贯 与 C 连贯 的 晒 数 .所 和 需 的 母 
ASC FO) 二 [(1 一 s) Ut), HRPM (a) PUCS)=AG); Æ Cb) PUGS) = 
A(s)+Bts)—1; 在 (c) PU (5s) =A (s) +B (Os) +C (s) 一 2. 

利用 第 8 节 例 (b) 与 习题 14 中 的 方法 的 一 个 简单 的 结合 . 

ER k BHEN Npa". 

w (n) = wmr (4 n>k), M w (n) = Rent k /re-n《( 当 nk). 

注意 ; 1—F() =A—-) QU) Ml ROAR, Aik a S RRO SP Sut. 
TRR QT O= E Cun 1) 5S” FE s51 AAN. 
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Ges ( 当 pq); 于 ( 当 p=9). 

当 gp 时 ,访问 次 数 是 一 个 不 完全 的 随机 变量 ， 

访问 次 数 的 期 望 值 是 : p(1 一 g1)/qqs-1 王 《p/g)". 

破产 概率 仍然 由 (2. 4) 给 出 ， 其 中 p= 二 a (1 一 7 |, g=8 (1 一 力 此 博弈 的 持续 时 间 
的 期 望 值 为 D.(1 一 7)”!， 其 中 D: 由 (3.4) 或 (3.5) 给 出 . 

廊 界 条 件 〈2.2) 用 go 一 6q1 二 1 一 6，qs 一 0 代 之 .对 于 (2. 4)， 对 应 于 解 : 


_{¢q/p)*—(q/p 8). ek Ne _ 
Gz (gi py 8) Fog pole (3.2) AA: Do =D, D, =0. 


at (2. 1)， 对 应 于 a = parse Haaa ME 9 二 入 是 一 个 特 解 〈 当 4 一 以 "十 g， 即 是 4 二 1 或 
Ertaga O. EARE: 
1, 4 q2p; 


、/ 一 ri 当 g<2p. 

| rae 5 当 qS 2p 

Went) CL) = PWrti,n CL) FW, CT), 具有 边界 条 件 C1) two, CX) 二 wn (7X) 二 0; 
(2) w.o C2) =0 (4 eFax) 和 wo(CZ) 一 |. 


FA won (2) =w, (ZAM Wan CL) = wan CORRE C1). 


aa 


Lome Tre CU re AP SY EN EES 


bet md ae mee 


12. 


18. 


19. 
31. 


边界 条 件 为 : Han Wail.n. HRAN: 
A CASTE (s) FAB (SAT? Cs) L ATTETE Cs) HA3? Cs) 
a7 (s) tage (s) > oF (sy 十 X93 Cs) 
PIM, <z} = > (Ur—z.n  Urten) 
z=] 


P(M, =2}=P{M,<2+1}-—-P{M,<z}. 
第 1 RAR 2 UMRES, MAM BEERE nkt. 
FAK (8.2) 用 下 式 代 之 : 


a—l 
U.(s)=s >) U, (s) pre-e tsr. 


x=] 
特征 方程 式 是 sÈ pol. 
第 15 章 
P 的 行 是 : (p.9q,0,0), (0,0, pq), (psq,0,0) 和 (0,0,p.q). Mn>l, BAA: H, 


pq, pq,q ). 
(a) 链 是 不 可 约 的 、 裔 历 的 ; PSP 1/3 对 一 切 了 和 成 立 . GER: 王 是 双重 随机 的 . ) 


(b) 链 的 周期 为 3， Ga 包含 E, 和 ED ， 状态 E; FJG , EE; 构成 Gz. 我 们 有 : i) — uz — 


holo 


us =U, = l. 


(c) IRAE, ME; 构成 一 个 闭 集 S1 E ME, 构成 男 一 个 闭 集 S;， 而 Es 是 暂 留 状态 ， 对 
应 于 两 个 闭 集 的 矩阵 都 是 2X2 阶 的 ， 所 有 元 素 都 是 万， 因此 
pP> C$ E ME, 属于 同一 个 闭 集 S,); 
PPO; HG. p> CHR=1, 3), ppo CHA=2, 4, 5). 
(d) 链 的 周期 为 3 4 a=(0,0,0,+,4,£) ,5 一 (1,0,0,0,0,0),e= (0,5 +5 ,0,0,0) 
JJA 。 ~w fl eso 393/ gee Uae ss 170 T ae 9 


我 们 发 现 P =P = HITA: a.b.b.c.c.c; m P=P=--WiATTA: b.c,¢,a,4, 
a; P= P’ =. REITA: ca,d,b,b,b. 
pir = (7/6)", { = (k/6)"—((kR—-1)/6)" (4 k>) m pS? =0( 24 kp). 


3 l 1 fl 1 3 1 
ashpa a ASEE aa) 
对 nJ 


m) — n—l n—j ma) — J -一 lad 
jo =(;_1)2 q SI prg. 
FRA (gs (1 一 ps) i. HBR j/q. 
f = `, Us (Feria ft n>. 
$=] 
偶数 值 的 状态 构成 一 个 不 可 约 的 闭 集 ， 在 第 nn 步 以 前 (包括 第 nn 步 ) 返回 E 的 概率 为 : 
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10. 


13. 


14, 
15. 
16. 


20. 


19. 


LU tw (1 w) vp v CL Uy) H eE t U2 8 Unz 1 Uen ) = 1 — U wd Ver 
因此 ， 偶 数值 状态 是 常 运 状态 的 充分 必要 条 件 是 最 后 一 个 乘积 趋 于 0， 系 统 从 Emi BR., 
永远 留 在 奇数 值 状 态 〈 暂 留 状态 ) 的 概率 为 eri vera. 
u= [1—p/q] (p/p LI 一 (Cao 
可 能 状态 为 ， Ey. +. Ew. X> 

Pig 5j Twt DE pin (oD Cw Pe" 
pi =w Pe? t oT eT wto 


u= (PE) E 


0 
0 0 0 1 sr 0 0 


OD Å 
o> 这 
+ 

OD 0 


0 0 0 0 s+ 0 I 
q p 0 O : 0 0 
注意 : 和 矩阵 是 双重 随机 的 ; 应 用 第 7 市 例 Ch. 
A> prei =1 (对 有 1，…，N 一 1D) 和 Pre = p. 
Du; Pj = tes MUUS =u 1—s) P(s) PSs). 遍历 性 的 充分 必要 条 件 是 p= PC) 
<1. HAREM, UDS wdw, HP wS Aa. 
如 果 N 宇 m 一 2， 随 机 变量 X” 和 XO EAA, SRE pe” HST aR BL 


是 Xm 的 分 布 ， (14.4). xt n= m4 1.8 =F: (4.5.0). (Gegeg): 
ot) 


第 17% 


E(X) =1e ; Var(X) =ie* (e — 1). 

P'a = AnP, +A(nt+1)) Pasi. 

P (D= (t JD Ci. 

ECX)=ie “ ; Var(X)=ie * (1—e *). 

P'a = — Atm) Pr) HAP, OF D Pa OX KNS Al Py) = — NuPn (+ 
AP n-i (1). 

解 线 性 微分 方程 式 组 的 标准 方法 导出 一 组 线性 方程 式 组 . 
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